Rede de estimativa de pose baseada na fusão de características atencionais de dados multimodais

ZHAO Yuntao ,  

DENG Xinhui ,  

摘要

A estimativa de pose 6D que equilibra precisão e aplicabilidade tem sido um tópico importante e desafiador de pesquisa. Este artigo propõe uma rede de estimativa de pose 6D baseada na fusão de características atencionais de dados multimodais. Primeiramente, é introduzida uma estrutura de módulo squeeze-and-excitation mais profunda, que fortalece as dependências e amplia o campo receptivo ajustando os pesos dos canais, melhorando o processamento das características das imagens RGB. Além disso, para dados multimodais, é implantado um módulo iterativo de fusão de características atencionais na fase de fusão, que através de múltiplas iterações resolve o problema da inconsistência de escala na fusão global de características, permitindo capturar e integrar dados multimodais com maior precisão, melhorando significativamente a regressão de pose. Por fim, para avaliar quantitativamente a robustez e a aplicabilidade do modelo em ambientes complexos, é introduzido o índice de percentual invisível, que permite avaliar o desempenho do modelo no tratamento de oclusões parciais ou fundos complexos. Experimentos de predição de pose em conjuntos de dados públicos verificaram que o modelo aprimorado não apenas alcançou previsões precisas no conjunto de validação, mas também é mais aplicável em ambientes complexos em comparação com o modelo Densefusion.

关键词

Estimação de pose 6D; dados multimodais; fusão de características atencionais; percentual invisível

阅读全文

以上内容由讯飞翻译自动生成,翻译内容仅供参考。对于因使用本网站翻译内容产生的相关后果,本网站不承担任何商业和法律责任。

The above content is generated by Large Model Translation. The translated content is for reference only. We do not assume any commercial or legal responsibilty for any consequences arising from the use of our website