Dans cet article, un réseau de suppression des nuages combinant des images de radar à ouverture synthétique (SAR) avec des images optiques dans le processus de fusion des données qui ne peut pas traiter avec précision les différences entre les nuages et l'arrière-plan. À l'étape d'extraction des caractéristiques, un mécanisme d'attention multi-échelle est introduit, capturant efficacement les informations globales et locales dans l'image et fournissant une représentation plus représentative des informations de caractéristiques pour la fusion ultérieure et la suppression des nuages. Les branches de fusion locale et la branche parallèle de différence ont été redisignées, un équilibre dynamique entre les deux a été atteint à travers un mécanisme de porte, exploitant pleinement leur contribution et affinant davantage le contour des nuages dans l'image optique nuageuse, permettant ainsi de récupérer une image optique sans nuages plus précise. Le Swin Transformer amélioré conscient de l'emplacement relie de manière dense les caractéristiques locales, donnant au modèle de réseau une meilleure robustesse dans des environnements complexes. L'algorithme proposé surpasse les autres algorithmes dans la tâche de suppression des nuages sur les images en termes de rapport signal-bruit (PSNR) et d'indice de similarité structurelle (SSIM) respectivement de 0,833 1 dB et 0,024 6. L'algorithme proposé dans cet article a démontré des performances supérieures par rapport à d'autres algorithmes dans la tâche de suppression des nuages dans les images.
关键词
image radar; image optique; multimodalité; fusion des données; élimination des nuages