Semantische Segmentierungsmethode für Straßenbilder mit Integration mehrdimensionaler Merkmale

ZHU Lei ,  

CHE Chenjie ,  

YAO Tongyu ,  

PAN Yang ,  

ZHANG Bo ,  

摘要

Um die Genauigkeit von semantischer Segmentierungsmethoden des Deep Learning bei komplexen Straßenbildern weiter zu verbessern, wird in dieser Arbeit ein semantisches Segmentierungsnetzwerk für Straßenbilder (MDFNet) auf Basis des PointRend-Netzwerks vorgeschlagen, das mehrdimensionale Merkmale (Multi-Dimensional Features, MDF) integriert. Zunächst wird durch den Aufbau eines Zielgebietsverstärkungsmoduls das Merkmalextraktions-Subnetz optimiert, indem in jedem Faltungsblock des tiefen Netzwerks die Zwischenmerkmalskarten adaptiv verfeinert werden, was die präzise Extraktion mehrdimensionaler Merkmalsinformationen komplexer Straßenbilder stärkt; anschließend wird bei der Merkmalsfusion ein Merkmals-Pyramidennetz eingeführt, das unterschiedliche Faltungskerne verwendet, um Straßenbilder unterschiedlicher Maßstäbe zu verarbeiten, wodurch Merkmale verschiedener Auflösungen von verschiedenen Objekten in komplexen Straßenszenen umfassender erfasst werden können; schließlich werden doppelte Decoder-Köpfe verwendet, um Bilddetails feiner wiederherzustellen und pixelgenaue Klassifikationsergebnisse zu erzielen. Experimentelle Ergebnisse zeigen, dass das vorgeschlagene Netzwerk im Vergleich zu anderen hervorragenden Segmentierungsnetzwerken wie DeepLabV3 und SegFormer eine höhere Segmentierungsgenauigkeit auf dem komplexen Cityscapes-Datensatz erreicht, mit einer durchschnittlichen Intersection-over-Union von 80,11%, was eine Verbesserung von über 3,51% gegenüber anderen Netzwerken bedeutet und ein besseres Verständnis komplexer Straßenbilder ermöglicht.

关键词

semantische Segmentierung;Zielgebietsverstärkung;Aufmerksamkeitsmechanismus;Merkmalspyramidennetz;mehrdimensionale Merkmale

阅读全文

以上内容由讯飞翻译自动生成,翻译内容仅供参考。对于因使用本网站翻译内容产生的相关后果,本网站不承担任何商业和法律责任。

The above content is generated by Large Model Translation. The translated content is for reference only. We do not assume any commercial or legal responsibilty for any consequences arising from the use of our website