Avatar signeurs : que peuvent-ils nous apprendre ?

Caroline Larboulette 1 Sylvie Gibet 1
1 EXPRESSION - Expressiveness in Human Centered Data/Media
UBS - Université de Bretagne Sud, IRISA-D6 - MEDIA ET INTERACTIONS
Résumé : Contexte. Le projet Avatar Signeurs de l'équipe EXPRESSION de l'IRISA a pour but de combiner la technologie d'un avatar signeur avec les mécanismes linguistiques des langues des signes afin de réduire le fossé de communication qui existe entre les sourds ou mal-entendants et les entendants, et ceci au moyen d'un système de traduction automatique du français vers la LSF et l'animation expressive de l'avatar (http://lsf.irisa.fr/). Problème. Quels peuvent être le rôle et l'utilité d'un avatar signeur ? Quel type d'interaction observe-t-on en fonction du contexte : réalité virtuelle, réalité augmentée ou visualisation traditionnelle sur un écran ? Méthode. Pour animer l'avatar, nous utilisons de la capture du mouvement afin d'obtenir des animations et des interactions plus naturelles. Les nouveaux énoncés sont construits par de la synthèse concaténative multi-canale. Résultats. Nous proposons des pistes de réflexion. Conséquences. Ces réflexions pourront guider le design d'applications interactives utilisant un avatar signeur pour apprendre et manipuler les concepts de la LSF mais aussi pour favoriser l'apprentissage en général transmis en LSF. Lien avec l'énaction. L'énaction se situe dans le cadre de l'apport de connaissances linguistiques ayant pour vecteur de communication les gestes dans des situations interactives entre un humain et son environnement.
Document type :
Conference papers
Complete list of metadatas

https://hal.archives-ouvertes.fr/hal-01990023
Contributor : Caroline Larboulette <>
Submitted on : Tuesday, January 22, 2019 - 5:15:58 PM
Last modification on : Thursday, February 7, 2019 - 3:40:45 PM
Long-term archiving on : Tuesday, April 23, 2019 - 4:27:32 PM

File

Enaction2018_cr.pdf
Files produced by the author(s)

Identifiers

  • HAL Id : hal-01990023, version 1

Citation

Caroline Larboulette, Sylvie Gibet. Avatar signeurs : que peuvent-ils nous apprendre ?. J.Enaction 2018 : Journée sur l'énaction en animation, simulation et réalité virtuelle, Nov 2018, Poitiers, France. ⟨hal-01990023⟩

Share

Metrics

Record views

71

Files downloads

43