FRKDNet: Wissensdestillationsbasiertes Merkmalextraktionsmodell für semantische Segmentierung

JIANG Shi-yi ,  

XU Yang ,  

LI Dan-yang ,  

FAN Run-ze ,  

摘要

Traditionelle Wissensdestillationsmethoden für die semantische Segmentierung weisen weiterhin Probleme wie unvollständige Wissensdestillation und unbedeutende Merkmalsübertragung auf, zudem ist die Wissensübertragung durch das Lehrnetzwerk komplex und die Positionsinformationen der Merkmale gehen leicht verloren. Zur Lösung dieser Probleme wird in dieser Arbeit ein semantisches Segmentierungsmodell zur Merkmalsextraktion auf Basis der Wissensdestillation namens FRKDNet vorgeschlagen. Zunächst wurde basierend auf den Eigenschaften von Vordergrundmerkmalen und Hintergrundrauschen eine Methode zur Merkmalsextraktion entwickelt, um Vordergrundinhalte aus dem destillierten Wissen zu separieren. Nach dem Filtern von Pseudo-Wissen des Lehrnetzwerks wird präziserer Merkmalinhalt an das Schülernetzwerk weitergegeben, um die Darstellungskapazität der Merkmale zu verbessern. Gleichzeitig werden im impliziten Encoding des Merkmalsraums Abstandsmaße zwischen und innerhalb der Klassen extrahiert, um eine entsprechende Merkmalskoordinatenmaske zu erhalten. Das Schülernetzwerk minimiert durch Simulation von Positionsinformationen der Merkmale die Abweichung zu den Merkmalpositionen des Lehrnetzwerks und berechnet die Destillationsverluste separat mit dem Schülernetzwerk, um die Segmentiergenauigkeit des Schülernetzwerks zu verbessern und dessen Konvergenz zu beschleunigen. Schließlich wurden auf den öffentlichen Datensätzen Pascal VOC und Cityscapes exzellente Segmentierungsergebnisse erzielt, mit MIoU-Werten von 74,19 % bzw. 76,53 %, was im Vergleich zum ursprünglichen Schülernetzwerk eine Steigerung von 2,04 % bzw. 4,48 % darstellt. Die vorgeschlagene Methode bietet im Vergleich zu gängigen Methoden eine bessere Segmentierungsleistung und Robustheit und stellt einen neuen Ansatz für die Wissensdestillation in der semantischen Segmentierung dar.

关键词

semantische Segmentierung;Neuronales Netzwerk;Wissensdestillation;Merkmalextraktion;Deep Learning

阅读全文

以上内容由讯飞翻译自动生成,翻译内容仅供参考。对于因使用本网站翻译内容产生的相关后果,本网站不承担任何商业和法律责任。

The above content is generated by Large Model Translation. The translated content is for reference only. We do not assume any commercial or legal responsibilty for any consequences arising from the use of our website