Langue et geste pour le dialogue homme-machine finalisé

Nadia Bellalem 1 Laurent Romary 1
1 LANGUE ET DIALOGUE - Human-machine dialogue with a significant language component
INRIA Lorraine, LORIA - Laboratoire Lorrain de Recherche en Informatique et ses Applications
Résumé : Nous présentons, dans cet article, une étude visant à intégrer le geste dans la communication homme-machine. Plus précisément, notre travail est centré sur le geste effectué dans le cadre de la référence aux objets (c'est le geste qui montre les objets dont on parle) ; ce dernier intervient donc en tant que complément d'une entrée langagière. Ainsi, nous montrons la nécessite d'une analyse approfondie du geste allant du signal issu du capteur de geste jusqu'à l'identification des objets visés, pour assurer la compréhension du message global parole+geste. Cette analyse se décompose en deux étapes. La première dite syntaxico-sémantique s'appuie sur la forme de la trajectoire pour repérer les parties significatives du signal auxquelles on associe une sémantique d'action de désignation. La seconde concerne l'interprétation du geste en contexte. Il s'agit là de prendre en compte d'une part l'application (notamment la scène visualisée) et ses caractéristiques ; d'autre part le dialogue oral et les caractéristiques instructionnelles de la référence langagière qui accompagne le geste analysé.
Document type :
Book sections
Liste complète des métadonnées

https://hal.archives-ouvertes.fr/hal-00416585
Contributor : Laurent Romary <>
Submitted on : Monday, September 14, 2009 - 5:06:02 PM
Last modification on : Friday, March 22, 2019 - 2:22:12 PM
Document(s) archivé(s) le : Tuesday, June 15, 2010 - 11:39:12 PM

Files

Mon-article-AvecFigure.pdf
Files produced by the author(s)

Identifiers

  • HAL Id : hal-00416585, version 1

Collections

Citation

Nadia Bellalem, Laurent Romary. Langue et geste pour le dialogue homme-machine finalisé. Caelen, Jean and Zreik, Khaldoun. Le Communicationnel pour Concevoir, Europia Productions, pp.185-201, 1995. ⟨hal-00416585⟩

Share

Metrics

Record views

260

Files downloads

274