Cette page résume et organise les publications en intelligence artificielle du monde entier. Les contenus sont synthétisés grâce à Google Gemini et le service est proposé à but non lucratif. Les droits d'auteur des articles appartiennent à leurs auteurs ou institutions respectives ; en cas de partage, il suffit d'en mentionner la source.
PAD : Fusion par découplage phase-amplitude pour la classification multimodale de la couverture terrestre
Created by
Haebom
Auteur
Huiling Zheng, Xian Zhong, Bin Liu, Yi Xiao, Bihan Wen, Xiaofeng Li
Contour
Dans cet article, nous proposons un cadre de découplage phase-amplitude (PAD) pour séparer les composantes de phase (partage de modalité) et d'amplitude (complémentarité de modalité) dans le domaine fréquentiel afin de résoudre les problèmes d'hétérogénéité de modalité et de complémentarité spectrale sous-exploitée dans la classification de la couverture terrestre par fusion d'images radar à synthèse d'ouverture (SAR) et RVB. Le PAD prend explicitement en compte les propriétés physiques du spectre de fréquences négligées par les méthodes existantes et exploite la sensibilité à la forme du SAR et la richesse spectrale du RVB en alignant les caractéristiques de phase entre les modalités grâce à la correction spectrale de phase (PSC) et en intégrant dynamiquement les modèles haute et basse fréquence à l'aide d'un perceptron multicouche adaptatif en fréquence (ASF). Les résultats expérimentaux sur les jeux de données WHU-OPT-SAR et DDHR-SK démontrent qu'il atteint des performances de pointe.
Takeaways, Limitations
•
Takeaways:
◦
Présentation d'un nouveau paradigme pour la fusion d'images SAR et RVB grâce à la séparation des composantes de phase et d'amplitude dans le domaine fréquentiel
◦
Améliorer les performances de classification de la couverture végétale en utilisant efficacement le partage des modalités et les fonctionnalités complémentaires
◦
Fusion efficace de la cohérence géométrique et des informations spectrales via les modules PSC et ASF
◦
Assurer la reproductibilité et l'évolutivité grâce au code ouvert
•
Limitations:
◦
Il est possible que les performances de la méthode proposée soient limitées à certains ensembles de données.
◦
Il est nécessaire de vérifier les performances de généralisation pour différents types d'images SAR et RVB
◦
Prise en compte de la complexité et du coût de calcul des perceptrons multicouches adaptatifs en fréquence
