Método de fusión bimodal de imágenes de teledetección

LIU Changyuan ,  

CAO Qing ,  

LIU Jinfeng ,  

摘要

En este artículo se propone una red de eliminación de nubes que combina imágenes de radar de apertura sintética (SAR) con imágenes ópticas en el proceso de fusión de datos que no puede tratar con precisión las diferencias entre nubes y fondo. En la etapa de extracción de características, se introduce un mecanismo de atención a múltiples escalas, capturando eficazmente la información global y local en la imagen y proporcionando una representación más representativa de la información de características para la fusión posterior y la eliminación de nubes. Se rediseñaron las ramas de fusión local y la rama paralela de diferencia, se logró un equilibrio dinámico entre ambas a través de un mecanismo de puerta, aprovechando al máximo su contribución y refinando aún más el contorno de las nubes en la imagen óptica nublada, lo que permite recuperar una imagen óptica más precisa sin nubes. El Swin Transformer mejorado consciente de la ubicación conecta de manera densa las características locales, brindando al modelo de red una mayor robustez en entornos complejos. El algoritmo propuesto supera a otros algoritmos en la tarea de eliminación de nubes en las imágenes en términos de relación señal-ruido (PSNR) e índice de similitud estructural (SSIM) respectivamente en 0.833 1 dB y 0.024 6. El algoritmo propuesto en este artículo demostró un rendimiento superior en comparación con otros algoritmos en la tarea de eliminación de nubes en las imágenes.

关键词

imagen de radar; imagen óptica; multimodalidad; fusión de datos; eliminación de nubes

阅读全文