A fusão de imagens pode integrar características consistentes e complementares de diferentes modalidades de imagens, compensando efetivamente a falta de detalhes em uma única modalidade. Para enfrentar os problemas dos métodos existentes em que a extração e fusão de características são independentes, o uso insuficiente de informações de iluminação e os resultados insatisfatórios de fusão em cenários de iluminação complexos, este artigo propõe uma rede de fusão de imagens infravermelhas e visíveis de fluxo duplo com interação camada por camada guiada por um mecanismo de alocação de pesos de iluminação. A rede adota uma estratégia de interação camada por camada para alternar entre extração de características e fusão entre modalidades. A informação global de iluminação é incorporada na rede de fluxo duplo por meio de uma rede de classificação prévia de iluminação, atenuando os efeitos da iluminação desigual. Na fase de extração de características, é integrada uma estratégia escalonada de dilatação e um bloco leve de informação contextual global para realizar associações semânticas multiescala e de longo alcance. Simultaneamente, características diferenciais e um mecanismo paralelo de atenção dupla são utilizados para fortalecer a triagem e o aprimoramento das informações complementares das modalidades, ajustando dinamicamente os pesos de fusão conforme a iluminação para evitar a predominância de uma única modalidade. Resultados experimentais mostram que este método supera métodos tradicionais em vários conjuntos de dados, com melhorias de 3,76% e 7,86% nos índices MI e Q_AB/F no conjunto de dados MSRS em comparação ao segundo melhor algoritmo. Em cenários de iluminação complexos como baixa luminosidade e neblina densa, a preservação dos contornos e detalhes dos objetos é melhor. Isso indica que o método proposto equilibra efetivamente informações espaciais de baixo nível e informações semânticas de alto nível, melhorando significativamente a precisão e o efeito visual da fusão de imagens em cenários complexos de iluminação.

fusão de imagens; peso de iluminação; interação de características; multiescala; informação diferencial