Description
Date depot: 1 janvier 1900
Titre: Analyse et reconnaissance multimodale de signaux sociaux: application à la synthèse d'attitudes sociales d'un agent conversationnel animé
Directeur de thèse:
Gael RICHARD (LTCI (IP PARIS))
Domaine scientifique: Sciences et technologies de l'information et de la communication
Thématique CNRS : Non defini
Resumé:
Directeur de thèse: Gaël Richard (LTCI-CNRS Telecom-ParisTech, équipe AAO)
{{Encadré par Chloe CLAVEL (LTCI-CNRS Telecom-ParisTech, équipe MultiMedia), Kevin Bailly (UPMC, ISIR, équipe Interaction )}}
Unité de recherche UMR 5141 Laboratoire Traitement et Communication de l'Information
Domaine: Sciences et technologies de l'information et de la communication
Mots clés : apprentissage statistique, reconnaissance des formes, méthodes génératives, traitement de la parole, expressions faciales, analyse multimodale, modélisation des émotions
{{ Financement de thèse assuré dans le cadre du projet SENSE http://www.smart-labex.fr/index.php?perma=SeNSE }}
{{Cadre de la thèse}} :
La thèse se déroulera entre le département Traitement du Signal et des Images de Telecom-ParisTech et l’ISIR de l’UPMC et s’inscrit dans le cadre du projet Sense (SigNaux Socio Emotionnel) du Labex Smart (Axe thématique : les interfaces et l’interaction de l’humain avec des environnements numériques et des mondes physiques distants). Ce projet s’intéresse aux signaux sociaux émotionnels échangés lors d’une interaction, et couvre l’intégralité de la chaîne de traitement, allant de la capture des signaux (vidéo, audio, neurologiques et physiologique) jusqu’à leur exploitation (agent virtuel, interaction musicale, groupe de personnes) en passant par leur interprétation et modélisation.
{{Sujet de la thèse:}}
Cette thèse a pour objectif l’analyse des descripteurs visuels (nous nous focaliserons sur les expressions faciales et les mouvements de tête) et audio (prosodiques et linguistiques) qui caractérisent les attitudes sociales (dominance et appréciation) et notamment l’analyse de l’ordonnancement des signaux issus des différentes modalités. L’enjeu à terme sera d’intégrer ces descripteurs dans un modèle de génération des attitudes sociales chez un agent conversationnel animé.
Doctorant.e: Janssoone Thomas