%0 Conference Proceedings %T Interaction et multimodalité %+ Equipe GEOD, Groupe d'étude sur l'oral et le dialogue (CLIPS-IMAG) %A Caelen, Jean %Z Conférence invitée %< avec comité de lecture %@ http://www.inrp.fr ; http://www.epi.asso.fr %B Troisième colloque Hypermédias et Apprentissages %C Châtenay-Malabry, France %Y Bruillard %Y E. %Y Baldner %Y J.-M. %Y Baron %Y G.-L. %I INRP ; EPI %P 11-32 %8 1996-05-09 %D 1996 %K Interface homme-machine %K Interaction multimodale %K Communication homme-machine %K Education -- Data processing
Computer-assisted instruction
Multimedia systems in education %K Educational technologies
Information and communications technology %K Education
Computer-assisted education %K Education et informatique
Enseignement assisté par ordinateur
Hypermédias
Multimédias en éducation
Nouvelles technologies de l'information et de la communication %Z Humanities and Social Sciences/EducationConference papers %X Cet article pose les problèmes généraux, concepts et principes concernant les interfaces homme-machine multimodales :
- l'usage et l'adéquation des modes de communication ;
- le contexte d'interaction : concurrent, alterné, composé, parallèle ;
- la gestion des événements bas niveaux (cohérence, chronologie, redondance, etc.) ;
- la fusion des informations ;
- leur interprétation (coréférence) ;
- les niveaux d'abstraction et de représentation.
On situe quelques uns de ces points à travers une taxonomie des interfaces.
On aborde le difficile problème de la coréférence entre les modes, placé dans une perspective de fusion d'informations auquel on propose une solution. Une application multimodale de conception de dessin ICPdraw est décrite pour en illustrer le propos. ICPdraw est construit sur une architecture en couches comprenant :
- des cartes de reconnaissance et de synthèse dédiées ;
- des serveurs d'événements ;
- un gestionnaire des modes ;
- un contrôleur de dialogue ;
- une interface de communication avec le noyau fonctionnel de l'application. %G French %2 https://edutice.hal.science/edutice-00000506/document %2 https://edutice.hal.science/edutice-00000506/file/h_a3p011.pdf %L edutice-00000506 %U https://edutice.hal.science/edutice-00000506 %~ SHS %~ UGA %~ TICE %~ HYPERAP %~ CNRS %~ UNIV-GRENOBLE1 %~ UNIV-PMF_GRENOBLE %~ INPG %~ LIG %~ LIG_SIDCH