Reconstrução leve de super-resolução de vídeo baseada em convolução espaço-temporal híbrida

XIA Zhenping ,  

CHEN Hao ,  

ZHANG Yuning ,  

CHENG Cheng ,  

HU Fuyuan ,  

摘要

Considerando a alta complexidade computacional das redes neurais convolucionais 3D na tarefa de super-resolução de vídeo e a capacidade limitada de extração de características espaço-temporais, este artigo propõe uma rede leve de reconstrução de super-resolução de vídeo baseada em convolução espaço-temporal híbrida. Primeiramente, propõem-se um módulo baseado em convolução espaço-temporal híbrida que melhora a capacidade da rede de extrair características espaço-temporais e reduz a complexidade computacional; em segundo lugar, propõe-se um módulo de fusão seletiva de características baseado em similaridade que reforça ainda mais a capacidade de extração de características relevantes; finalmente, propõe-se um módulo de compensação de movimento baseado em mecanismo de atenção que, em certa medida, reduz o impacto da fusão incorreta de características. Os resultados experimentais mostram que a rede proposta pode alcançar um bom equilíbrio entre o desempenho da super-resolução de vídeo e a complexidade da rede, alcançando 8 quadros por segundo em super-resolução 4x no conjunto de dados padrão SPMCS-11. A rede proposta atende aos requisitos de rapidez e precisão na inferência em dispositivos de borda.

关键词

super-resolução de vídeo; aprendizado profundo; redes neurais convolucionais 3D; fusão de características

阅读全文

以上内容由讯飞翻译自动生成,翻译内容仅供参考。对于因使用本网站翻译内容产生的相关后果,本网站不承担任何商业和法律责任。

The above content is generated by Large Model Translation. The translated content is for reference only. We do not assume any commercial or legal responsibilty for any consequences arising from the use of our website