Оценка глубины светового поля на основе корректирующей окклюзионной свертки

NI Jing ,  

DENG Huiping ,  

XIANG Sen ,  

WU Jin ,  

摘要

Изображение светового поля способно одновременно записывать информацию о световых лучах в разных положениях и направлениях в пространстве, предоставляя богатую информацию для оценки точной карты глубины. Однако в сложных сценах с окклюзиями и повторяющимися текстурами недостаток извлечения признаков изображения приводит к потере деталей карты глубины. В статье предлагается сеть оценки глубины светового поля на основе корректирующей свертки, которая полноценно использует богатую структурную информацию изображения светового поля для улучшения оценки глубины в сложных областях, таких как окклюзии. Маска окклюзии генерируется с использованием начальной карты параллакса и субапертурных изображений, применяется корректирующая свертка для определения и кодирования пространственной информации окклюзированных областей для их распознавания, а также комбинируются многомасштабные признаки для дополнения легко теряющихся краевых деталей. С помощью пространственного механизма внимания окклюзированные области получают больший вес, что устраняет избыточную информацию и глобально оптимизирует подсубпиксельные затраты. Экспериментальные результаты показывают, что метод достигает средних показателей MSE и BadPix (ε=0.03) соответственно 0.951 и 4.261 на эталонной 4D платформе светового поля, способен обеспечивать минимальную ошибку оценки глубины в большинстве сцен, демонстрирует высокую устойчивость в окклюзированных областях и превосходит другие алгоритмы.

关键词

световое поле;оценка глубины;окклюзионная маска;корректирующая свертка;пространственное внимание

阅读全文

以上内容由讯飞翻译自动生成,翻译内容仅供参考。对于因使用本网站翻译内容产生的相关后果,本网站不承担任何商业和法律责任。

The above content is generated by Large Model Translation. The translated content is for reference only. We do not assume any commercial or legal responsibilty for any consequences arising from the use of our website