Développement d’une plateforme pour la reconnaissance des émotions

Abstract

La reconnaissance automatique des émotions est un domaine de recherche qui vise à permettre aux systèmes informatiques de comprendre l’état émotionnel des utilisateurs à partir de différentes sources d’information. Dans ce travail, nous proposons une plateforme multimodale de reconnaissance des émotions basée sur l’analyse conjointe des expressions faciales et des signaux physiologiques. La première modalité repose sur l’analyse des expressions faciales à l’aide d’une webcam, de la bibliothèque MediaPipe pour l’extraction des caractéristiques du visage et d’un réseau de neurones multicouche (MLP) pour la classification des émotions. La seconde modalité exploite plusieurs signaux physiologiques, notamment l’EMG, l’EDA, la température cutanée et le PPG, acquis à l’aide d’une plateforme basée sur Arduino Mega et différents capteurs biomédicaux. Les données acquises sont prétraitées, analysées puis fusionnées afin d’améliorer la précision et la robustesse de la reconnaissance émotionnelle. Les émotions étudiées sont la joie, la tristesse, la peur et le dégoût. Les résultats obtenus montrent l’intérêt de l’approche multimodale pour une détection plus fiable des émotions humaines.