Fusão de imagens infravermelhas e visíveis com atenção densa multiescala

CHEN Yong ,  

ZHANG Jiaojiao ,  

WANG Zhen ,  

摘要

Para resolver os problemas existentes de perda de informações detalhadas e extração insuficiente de características nos resultados da fusão de imagens infravermelhas e visíveis, foi proposto um modelo de rede de aprendizado profundo para fusão de imagens infravermelhas e visíveis com atenção densa multiescala. Primeiro, foram projetadas convoluções multiescala para extrair informações em diferentes escalas nas imagens infravermelhas e visíveis, aumentando o campo receptivo para extração de características, superando o problema da extração insuficiente em única escala. Em seguida, a rede com conexões densas reforça a extração de características, e no final da sub-rede codificadora é utilizado o mecanismo de atenção por convolução deformável proposto, que conecta estreitamente a informação do contexto global, fortalecendo a capacidade de focar em características importantes das imagens infravermelhas e visíveis. Finalmente, uma rede decodificadora composta por camadas totalmente convolucionais reconstrói a imagem fundida gerada. Foram selecionados seis indicadores objetivos de avaliação de fusão de imagens. Os resultados dos experimentos de fusão em conjuntos de dados públicos de imagens infravermelhas e visíveis mostram que, em comparação com outros 8 métodos, todos os indicadores experimentais do algoritmo proposto melhoraram, com aumento médio de 0,26 vezes na similaridade estrutural (SSIM) e 0,45 vezes na frequência espacial (SF). Os resultados da fusão obtidos pelo método proposto preservam bordas e informações de objetos mais nítidas, apresentando melhor contraste e clareza, superando os métodos comparativos na avaliação objetiva.

关键词

imagens infravermelhas e visíveis; fusão de imagens; extração de características multiescala; rede de conexões densas; mecanismo de atenção

阅读全文

以上内容由讯飞翻译自动生成,翻译内容仅供参考。对于因使用本网站翻译内容产生的相关后果,本网站不承担任何商业和法律责任。

The above content is generated by Large Model Translation. The translated content is for reference only. We do not assume any commercial or legal responsibilty for any consequences arising from the use of our website