« Modéliser le geste pour l’apprentissage en langue des signes »

Portrait

N° 393 - Publié le 28 octobre 2021
DR
Ce que je cherche
Sylvie Gibet
Professeur des universités en informatique à l’Irisa, Université Bretagne Sud.

« Je m’intéresse à la modélisation des mouvements en couplant des données capturées avec des modèles de simulation. L’un de mes axes de recherche concerne le développement d’applications numériques facilitant l’inclusion des enfants sourds au monde de l’éducation. L’objectif est de générer de nouveaux contenus éducatifs, aujourd’hui limités par la faible disponibilité de vidéos préenregistrées en langue des signes française (LSF).

Avec un avatar 3D

Deux types d’applications sont considérés. La première est la traduction du texte vers la LSF par un avatar 3D animé. Afin de produire des mouvements fluides et compréhensibles, nous nous appuyons sur des techniques d’animation similaires à celles des jeux vidéo, en utilisant des données de mouvements capturés sur des personnes signantes. Dans le sens inverse, la traduction des signes en textes1 facilite le sous-titrage automatique. L’une des clés réside dans l’accès à d’importantes bases de données vidéo, couplé à la mise en œuvre de modèles d’intelligence artificielle, permettant de reconnaître automatiquement les signes. Cette recherche permet d’envisager de futures solutions innovantes et performantes sur ces deux approches. »

PROPOS RECUEILLIS PAR HUGO LEROUX

1. Correspondant au passage de la vidéo vers le texte.

TOUS LES PORTRAITS

Abonnez-vous à la newsletter
du magazine Sciences Ouest

Suivez Sciences Ouest