Séminaire Linguistique Informatique




9 Mars 2009

Philippe BLACHE (Université de Provence)
.

TITRE: Vers des grammaires pour le traitement de l'information multimodale

Le traitement de l’information linguistique est aujourd’hui confronté à la nécessité de traiter des données hétérogènes, provenant des différentes modalités utilisées dans des situations d’interaction (prosodie, syntaxe, pragmatique, gestualité, etc.). Les théories linguistiques existantes nous disent aujourd’hui finalement assez peu sur la façon de prendre en compte ce problème. Nous proposons dans cette présentation d’aborder ce problème en proposant quelques réflexions en direction de l’élaboration d’une grammaire multimodale.

Il est pour cela nécessaire de disposer de données permettant de décrire ces phénomènes. La première partie de l’exposé sera ainsi consacrée à la
présentation d’un projet sur la constitution de corpus multimodaux, leur recueil et leur annotation. Nous présenterons dans une seconde partie
plusieurs phénomènes qu’il devient possible de décrire grâce à ce type de ressources. La dernière partie décrira une approche permettant de représenter ces informations sous la forme de contraintes et de les intégrer dans une perspective d’élaboration d’une grammaire multimodale.