Reconocimiento de microexpresiones basado en un mecanismo de multiatención de color y flujo óptico

HUANG Kai ,  

WANG Feng ,  

WANG Ye ,  

CHANG Yiting ,  

摘要

Debido a que el método de flujo óptico no puede aprovechar completamente la información del color facial en microexpresiones, lo que conduce a una baja precisión de reconocimiento, este artículo propone un método de red de doble flujo con múltiples atenciones basado en color y flujo óptico. Primero, se propone extraer preliminarmente las características fisiológicas emocionales faciales en forma de mapa de diferencia de color CIE Luv, compensando la unicidad y limitaciones de las características de flujo óptico de microexpresiones; luego, se combinan en paralelo el módulo PAM y el bloque ECA para obtener un módulo de doble atención liviano que extrae características clave espaciales y de canal; finalmente, se diseña un mecanismo de atención cruzada para obtener características mixtas de color y flujo óptico, que se fusionan con las características espaciales y de canal clave para la clasificación. El modelo se evalúa mediante validación cruzada leave-one-out. La precisión y la puntuación F1 alcanzan 69.18% y 67.04% en el conjunto de datos SAMM, y 72.38% y 70.85% en el conjunto de datos CASME II. Los resultados experimentales superan los algoritmos predominantes actuales, lo que confirma la efectividad del modelo y sus módulos en el reconocimiento de microexpresiones.

关键词

Visión por computadora; Reconocimiento de microexpresiones; CIE Luv; Características de color; Características de flujo óptico; Red de doble flujo

阅读全文

以上内容由讯飞翻译自动生成,翻译内容仅供参考。对于因使用本网站翻译内容产生的相关后果,本网站不承担任何商业和法律责任。

The above content is generated by Large Model Translation. The translated content is for reference only. We do not assume any commercial or legal responsibilty for any consequences arising from the use of our website