Fiche de DUQUENNE Paul-ambroise

Titre : Représentations vectorielles de phrases pour le traitement massivement multilingue du texte et de la parole
Date : 14 mars 2024
Heure: 14:00
Résumé : Cette thèse explore comment les phrases peuvent être représentées mathématiquement de manière similaire quelque soit leur langue ou leur modalité (parole ou texte). Un calcul de distance dans un tel espace vectoriel doit correspondre à l'estimation de similarité sémantique entre deux phrases. Nous avons pour la première fois étendu des espaces de représentation sémantique de phrases à la modalité parlée. Nous avons ensuite étudié comment utiliser de telles représentations pour évaluer la similarité entre phrases parlées et écrites et ainsi créer automatiquement des alignements de traduction parlée. Nous avons exploré comment traduire de la parole vers du texte et de la parole vers de la parole à partir de ces représentations. Enfin, nous avons introduit un nouvel espace de représentation de phrase multilingue parole/texte qui améliore l'état de l'art, nommé SONAR, et proposé une représentation auxiliaire spécifique aux propriétés de la parole telles que la voix ou l'expressivité.
Lieu : Inria Paris, 2 Rue Simone IFF, 75012 Paris