agenda | intranet

;

IHM Multimodale

Description : communication multimodale naturelle en réalité virtuelle, une application aux tâches collaboratives

Équipe/Organisme :
- Laboratoire I3S (Informatique, Signaux, Systèmes)
- LPL (Laboratoire Parole et Langage)
- LIA (Laboratoire d'Informatique d'Avignon)
- Sté JENsys
- ISM (Institut des Sciences du Mouvement)

Auteurs principaux : Farre Jacques, Philippe Blache

Année : 2008

La communication multimodale, après avoir longtemps été limitée à des applications spécifiques, commence à aborder la question de son traitement en situation naturelle. Il convient pour cela de prendre en compte non seulement les aspects directement liés à la communication, mais également son environnement. Le problème de la communication multimodale commence à être bien décrit. En revanche sa mise en œuvre en situation environnée en est à ses débuts. La réalité virtuelle constitue pour cela un terrain d'application privilégié en ce qu'elle permet de contrôler la plupart des paramètres de l'environnement tout en s'approchant de la complexité de situations naturelles.

L'objectif de ce projet est d'examiner les conditions de mise en œuvre d'une communication multimodale naturelle dans un type de situation complexe (les tâches collaboratives), en immersion dans une plate-forme de réalité virtuelle. Nous proposons pour cela de tester les modèles d'interaction naturelle homme-homme que nous avons développés en portant plus particulièrement notre attention sur l'interaction geste-parole