Método de segmentación semántica de imágenes de escenas urbanas que fusiona características multidimensionales

ZHU Lei ,  

CHE Chenjie ,  

YAO Tongyu ,  

PAN Yang ,  

ZHANG Bo ,  

摘要

Para mejorar aún más la precisión de segmentación semántica de métodos de aprendizaje profundo en imágenes complejas de escenas urbanas, este artículo propone una red de segmentación semántica de imágenes de escenas urbanas (MDFNet) basada en la red PointRend que fusiona características multidimensionales (Multi-Dimensional Features, MDF). Primero, mediante la construcción de un módulo de mejora de área objetivo se optimiza la subred de extracción de características, refinando adaptativamente los mapas de características intermedias en cada bloque convolucional de la red profunda, fortaleciendo así la extracción detallada de la información de características multidimensionales de las imágenes complejas de escenas urbanas; luego, durante la fusión de características se introduce una red piramidal de características que utiliza diferentes núcleos convolucionales para procesar imágenes de escenas urbanas en diferentes escalas, obteniendo así de manera más integral características de diferentes resoluciones de varios objetivos en imágenes complejas de escenas urbanas; finalmente, se utiliza una doble cabeza de decodificación para una recuperación más detallada de los detalles de la imagen, obteniendo resultados de clasificación por píxel. Los resultados experimentales muestran que la red propuesta logra una mayor precisión de segmentación en el conjunto de datos complejo Cityscapes en comparación con otras redes de segmentación excelentes como DeepLabV3 y SegFormer, alcanzando un índice de intersección sobre unión promedio del 80.11%, con una mejora de más del 3.51% respecto a otras redes, ofreciendo una mejor comprensión de las imágenes complejas de escenas urbanas.

关键词

segmentación semántica;mejora de área objetivo;mecanismo de atención;red piramidal de características;características multidimensionales

阅读全文

以上内容由讯飞翻译自动生成,翻译内容仅供参考。对于因使用本网站翻译内容产生的相关后果,本网站不承担任何商业和法律责任。

The above content is generated by Large Model Translation. The translated content is for reference only. We do not assume any commercial or legal responsibilty for any consequences arising from the use of our website