Description
Date depot: 8 septembre 2022
Titre: Reconnaissance des locuteurs à partir de la dynamique faciale.
Directeur de thèse:
Jean-Luc DUGELAY (Eurecom)
Domaine scientifique: Sciences et technologies de l'information et de la communication
Thématique CNRS : Non defini
Resumé: Habituellement, la reconnaissance faciale est réalisée à partir d’une image fixe, éventuellement extraite d’une vidéo. La reconnaissance faciale à distance via un téléphone intelligent est de plus en plus envisagée dans de nombreuses applications. Afin de prévenir, ou tout au moins rendre plus difficile, les attaques de présentation, L’ANSI préconise de réaliser l’authentification des personnes à partir de vidéos plutôt que d’images fixes. Travailler à partir de vidéos plutôt que d’images fixes ouvre la porte à utiliser la dynamique faciale des locuteurs (clignements des yeux, mouvements de la tête, mimiques faciales, sourire, expressions) et non plus simplement l’apparence. Nous passerions ainsi d’une biométrie physique (apparence du visage) à une biométrie comportementale (dynamique du visage). Cette transition rendra plus difficile le leurrage des systèmes même s’il faut d’ores et déjà tenir compte de l’émergence des vidéos hypertruquées (« deepfakes » en anglais). On peut en effet imaginer dans un proche avenir la possibilité de générer en temps réel des vidéos hypertruquées incluant quelques actions et expressions faciales éventuellement demandées par le système d’authentification en début de session. Cette thèse permettra d’identifier à la fois les mimiques faciales les plus significatives pour authentifier les individus (en complément de l’apparence) mais devra également préciser le niveau de difficulté à les reproduire avec réalisme de manière artificielle afin de prévenir les attaques de présentation en vidéo. Il est important de distinguer ici si une attaque a pour objectif de leurrer (visuellement) un opérateur humain, (numériquement) un algorithme de reconnaissance faciale basé sur l’intelligence artificielle, ou bien encore les deux à la fois. Ces travaux ont pour objectif, non pas de remplacer, mais d'apporter une aide aux opérateurs humains qui doivent décider si oui ou non ils sont en présence d'une tentative usurpation d'identité.
Doctorant.e: Husseini Sahar