Méthode de segmentation sémantique d'images de scènes urbaines intégrant des caractéristiques multidimensionnelles

ZHU Lei ,  

CHE Chenjie ,  

YAO Tongyu ,  

PAN Yang ,  

ZHANG Bo ,  

摘要

Afin d'améliorer davantage la précision de la segmentation sémantique par apprentissage profond sur des images de scènes urbaines complexes, cet article propose un réseau de segmentation sémantique d'images de scènes urbaines (MDFNet) basé sur le réseau PointRend et intégrant des caractéristiques multidimensionnelles (Multi-Dimensional Features, MDF). Tout d'abord, en construisant un module de renforcement de zone cible pour optimiser le sous-réseau d'extraction de caractéristiques, les cartes de caractéristiques intermédiaires sont affinées de manière adaptative à chaque bloc convolutionnel du réseau profond, renforçant ainsi l'extraction détaillée des informations de caractéristiques multidimensionnelles des scènes de rue complexes; ensuite, lors de la fusion des caractéristiques, un réseau pyramidal de caractéristiques est introduit, utilisant différentes tailles de noyaux convolutifs pour traiter les scènes urbaines à différentes échelles, permettant une acquisition plus complète des caractéristiques à différentes résolutions des différents objets des scènes complexes; enfin, une double tête de décodage est utilisée pour une restauration plus détaillée des détails de l'image, obtenant ainsi un résultat de classification pixel par pixel. Les résultats expérimentaux montrent que le réseau proposé offre une précision de segmentation supérieure sur le jeu de données complexe Cityscapes par rapport à d'autres réseaux performants tels que DeepLabV3 et SegFormer, atteignant un indice de Jaccard moyen de 80,11 %, soit une amélioration de plus de 3,51 % par rapport aux autres réseaux, avec une meilleure compréhension des images de scènes urbaines complexes.

关键词

segmentation sémantique;renforcement de la zone cible;mécanisme d'attention;réseau pyramidal de caractéristiques;caractéristiques multidimensionnelles

阅读全文

以上内容由讯飞翻译自动生成,翻译内容仅供参考。对于因使用本网站翻译内容产生的相关后果,本网站不承担任何商业和法律责任。

The above content is generated by Large Model Translation. The translated content is for reference only. We do not assume any commercial or legal responsibilty for any consequences arising from the use of our website