Lichtfeld-Tiefenschätzung basierend auf korrigierter oklusionsbewusster Faltung

NI Jing ,  

DENG Huiping ,  

XIANG Sen ,  

WU Jin ,  

摘要

Lichtfeldbilder können gleichzeitig Lichtstrahlinformationen an verschiedenen Positionen und Richtungen im Raum aufzeichnen und liefern somit reichhaltige Informationen zur Schätzung präziser Tiefenkarten. In komplexen Szenen wie Überdeckungen und sich wiederholenden Texturen führt jedoch eine unzureichende Merkmalsextraktion zu Detailverlusten in der Tiefenkarte. Dieser Artikel schlägt ein korrigiertes Faltungsnetzwerk zur Tiefenschätzung im Lichtfeld vor, das die reichhaltigen strukturellen Informationen des Lichtfeldbildes voll ausnutzt, um die Tiefenschätzung in komplexen Bereichen wie Überdeckungen zu verbessern. Mit anfänglicher Disparitätskarte und Subaperturbildern wird eine Überdeckungsmaske generiert, korrigierte Faltung wird verwendet, um die räumlichen Informationen der Überdeckungsbereiche zu diskriminieren und zu kodieren, um diese wahrzunehmen, kombiniert mit mehrskaligen Merkmalen zur Ergänzung leicht verlierbarer Kantendetails. Durch einen räumlichen Aufmerksamkeitsmechanismus erhalten Überdeckungsbereiche ein höheres Gewicht, redundante Informationen werden eliminiert und die subpixelgenauen Kosten global optimiert. Experimentelle Ergebnisse zeigen, dass die Methode auf der 4D-Lichtfeld-Benchmarkplattform durchschnittliche MSE- und BadPix-Werte (ε=0.03) von 0,951 bzw. 4,261 erreicht, in den meisten Szenen die geringsten Fehler bei der Tiefenschätzung erzielt, eine hohe Robustheit in Überdeckungsbereichen zeigt und andere Algorithmen übertrifft.

关键词

Lichtfeld;Tiefenschätzung;Oklusionsmaske;korrigierte Faltung;räumliche Aufmerksamkeit

阅读全文

以上内容由讯飞翻译自动生成,翻译内容仅供参考。对于因使用本网站翻译内容产生的相关后果,本网站不承担任何商业和法律责任。

The above content is generated by Large Model Translation. The translated content is for reference only. We do not assume any commercial or legal responsibilty for any consequences arising from the use of our website