Multimodal expression analysis
Year: 2017
Type: dissertation
Abstract: El uso del reconocimiento de emociones ha ido en aumento en los últimos años, desde las redes sociales y los videojuegos a la investigación sobre la experiencia del cliente. Este hecho ha creado un interés en la comunidad para su investigación y desarrollo. Este trabajo se ha centrado en el estudio del uso de dos modalidades, habla y video, para entrenar una CNN para determinar una emoción de una secuencia de vídeo. Se ha tomado un enfoque de deep learning para las características de video y clasificadores clásicos para audio. El sistema ha sido entrenado principalmente con la base de datos AFEW lo que hace que adopte un enfoque adaptado al entorno real en lugar de un entorno de laboratorio. Esto hace que la detección de emociones sea más difícil debido a la cantidad de ruido en ambas modalidades. Se presentan tres sistemas con fusión multimodal a nivel de decisión, y dos sistemas a nivel de fusión de características.
Author: Carlos A. Davila Martinez
Language: English
Topic: Emotion and Mood Recognition
Subfield: Artificial Intelligence
Field: Computer Science
Domain: Physical Sciences
Open Access status: green
OpenAlex ID: W2595275445