Louis Abel, doctorant dans l’équipe Multispeech, soutiendra sa thèse intitulée “Co-speech gesture synthesis: towards a controllable and interpretable model using a graph deterministic approach” le jeudi 6 février, à 9h en salle C005.
La communication humaine ne passe pas que par les mots : les gestes jouent un rôle clé en apportant clarté, émotions et idées. Pourtant, les voix artificielles, bien qu’évoluées, manquent souvent de ce langage corporel, rendant les interactions moins naturelles. Pour résoudre ce problème, nous avons créé STARGATE, un système qui génère des gestes synchronisés avec la parole. En combinant audio et texte, il produit des gestes naturels et peut même adapter le style selon le locuteur désigné.
STARGATE surpasse les modèles précédents en terme de naturel et d’adéquation. Rapide et efficace, il est prêt pour un usage en temps réel. Une analyse approfondie a montré que le système comprend le lien entre texte et gestes, ouvrant la voie à des applications prometteuses, comme des assistants virtuels plus engageants ou des outils pour enrichir la communication multimodale.
Encadrants
