Restauração de imagem de segunda ordem baseada em convolução com gatilho e transferência de atenção

PENG Yan-fei ,  

GU Li-rui ,  

WANG Gang ,  

摘要

Devido à tendência dos algoritmos de restauração existentes de produzirem artefatos e inconsistências semânticas com a imagem original ao lidar com grandes áreas faltantes, propõe-se um método de restauração de imagens de segunda ordem baseado em convolução com gatilho e transferência de atenção. O método reforça a influência da semântica interna da imagem a ser reparada na rede de restauração para garantir a consistência semântica geral do resultado. Primeiro, utiliza-se convolução em várias camadas para uma restauração grosseira da imagem danificada; em seguida, o resultado grosseiro é inserido numa rede de refinamento aprimorada que usa convolução com gatilho e rede de transferência de atenção para restaurar os detalhes texturais internos da imagem. Na fase de codificação e decodificação, o módulo SimAM é introduzido como mecanismo de atenção para fortalecer a capacidade de filtragem de informações importantes na imagem a ser reparada; por fim, um discriminador de Markov com normalização espectral distingue o real do falso enquanto fornece uma perda adversarial. A perda perceptual e a perda de similaridade estrutural multiescala são usadas como perdas de reconstrução, combinadas com a perda adversarial como função de perda. Experimentos comparativos com outros métodos de restauração de imagem mostram que este método melhora a similaridade estrutural em 1,47% e a relação sinal-ruído de pico em 5,48% em comparação com os melhores resultados. Os resultados da restauração do método são mais reais e naturais, alcançando efeitos ideais de restauração para diversos tamanhos de áreas faltantes.

关键词

Processamento de imagem;Restauração de imagem;Convolução com gatilho;Transferência de atenção;Perda adversarial

阅读全文

以上内容由讯飞翻译自动生成,翻译内容仅供参考。对于因使用本网站翻译内容产生的相关后果,本网站不承担任何商业和法律责任。

The above content is generated by Large Model Translation. The translated content is for reference only. We do not assume any commercial or legal responsibilty for any consequences arising from the use of our website