Алгоритм удаления дождя с изображений на основе многоуровневой каскадной сверточной структуры

ZHANG Yong ,  

GUO Jie-long ,  

WANG Fan ,  

LAN Hai ,  

YU Hui ,  

WEI Xian ,  

摘要

Изображения в дождливую погоду влияют на эффективность и точность задач компьютерного зрения. Изображения дождливой погоды часто содержат капли дождя или следы дождя из разных направлений, размеров и форм. При удалении этих капель и следов существующие методы обычно не учитывают информацию признаков на разных тонких масштабах дождливых изображений, использование только одного масштаба имеет значительные недостатки и не позволяет восстановить достаточно четкие изображения для задач зрения. Благодаря мощным возможностям сверточных нейронных сетей по извлечению признаков, в данной работе предлагается сквозной многоуровневый каскадный сверточный оператор, который включает 4 сверточных слоя, которые связаны по лестничному принципу, формируя единый модуль, способный извлекать и интегрировать признаки дождливой сцены на разных масштабах. Данный оператор встроен в структуру прогрессивной рекуррентной сети, используя рекуррентную структуру для многократного удаления дождевых полос, что в конечном итоге эффективно восстанавливает изображения без дождя, близкие к реальным. Метод был протестирован на синтетических наборах данных с дождем Rain100H, Rain100L, Rain800 и синтетическом наборе данных для автономного вождения BDD1000. Результаты экспериментов показывают, что алгоритм достиг значений PSNR 30.70, 37.91, 27.63, 35.74 дБ и значений SSIM 0.914, 0.980, 0.894, 0.977 на четырёх наборах данных. Визуализация результатов удаления дождя на реальных наборах данных полностью подтверждает эффективность предложенного метода в задаче удаления дождя.

关键词

удаление дождя с изображений;многоуровневая каскадная сверточная структура;сверточная нейронная сеть;глубокое обучение;многоуровневые признаки;остаточная структура

阅读全文

以上内容由讯飞翻译自动生成,翻译内容仅供参考。对于因使用本网站翻译内容产生的相关后果,本网站不承担任何商业和法律责任。

The above content is generated by Large Model Translation. The translated content is for reference only. We do not assume any commercial or legal responsibilty for any consequences arising from the use of our website