Méthode de détection d'objectifs inter-modale à double flux pour images multispectrales de télédétection par drone

LIAO Huan ,  

GU Chengjie ,  

ZHU Dongjun ,  

MENG Yi ,  

摘要

Pour résoudre les problèmes d'affaiblissement des caractéristiques intra-modales et d'interaction inter-modale inefficace dans la détection d'objectifs multispectraux par drone, nous proposons une méthode de détection d'objectifs fusionnant un renforcement monocanal à double flux et une interaction de caractéristiques inter-modales. Nous concevons un module de transformation en ondelettes basé sur une convolution séparables en profondeur, qui extrait et renforce les détails haute fréquence des cartes de caractéristiques, renforçant la capacité de la branche lumière visible à extraire les détails de texture. Nous proposons un module de fusion d'informations globales à plusieurs échelles qui utilise l'intégration de caractéristiques multi-échelle et l'extraction d'informations globales pour améliorer la détection d'objets thermiques par la branche infrarouge. Nous construisons un module de fusion d’attention auto-multimodale hybride qui guide adaptativement l'interaction des caractéristiques visible et infrarouge, exploitant pleinement la complémentarité spectrale. Les résultats expérimentaux montrent que cette méthode atteint un mAP@0.50 de 86,7% et 86,0% sur les ensembles de données multispectraux DVTOD et DroneVehicle, améliorant respectivement de 1,3% et 1,9% le modèle de base, améliorant efficacement les performances de détection multispectrale par drone.

关键词

drone; détection d'objectifs multispectraux; inter-modale; transformation en ondelettes; attention auto hybride

阅读全文

以上内容由讯飞翻译自动生成,翻译内容仅供参考。对于因使用本网站翻译内容产生的相关后果,本网站不承担任何商业和法律责任。

The above content is generated by Large Model Translation. The translated content is for reference only. We do not assume any commercial or legal responsibilty for any consequences arising from the use of our website