Figure

Objet

Dans le cadre de ses activités de recherche sur la Langue des Signes Française (LSF), le groupe Geste et Image est impliqué dans deux projets nationaux :
- le projet interdisciplinaire ``LS-COLIN'' (Langues des Signes - COgnition, Linguistique, INformatique), destiné à évaluer les apports croisés d'études linguistiques, cognitives et informatiques sur les Langues des Signes (LS);
- le projet ``ARC-LSF'' (Action de Recherche Coopérative sur la LSF), faisant collaborer plusieurs domaines de la discipline informatique, impliqués en particulier dans le traitement d'image et la reconnaissance de formes.

Description

Quatre partenaires (LIMSI, Paris 8, IRIT, Paris 4) participent au projet LS- COLIN, qui est soutenu pour deux ans dans le cadre d'une action cognitique. Il s'agit d'étudier et de confronter les primitives d'analyse utilisées par les linguistes, les cogniticiens et les informaticiens afin de conforter ou d'étendre les hypothèses propres à chaque discipline. Pour ces études, nous réalisons des corpus vidéo de personnes s'exprimant en LSF. Ces corpus font l'objet d'une annotation à différents niveaux de granularité (sémantique, syntaxique, lexical, articulatoire, géométrique, dynamique, etc). Le travail réalisé jusqu'alors par l'ensemble des partenaires porte sur les aspects suivants [1] : étude comparative des différents systèmes d'écriture et d'annotation de la LS, conduisant au choix et à la spécification d'un système d'annotation ``en partition'' (figure 1) ; recensement des principaux indices visuels utilisés par les linguistes pour analyser la LS, réalisation d'opérateurs d'analyse d'image ; étude de représentations cognitives de concepts dans le but de fournir des éléments d'analyse spatiale et formelle à l'analyse d'image [2] ; réalisation à l'Institut National des Jeunes Sourds (INJS) d'un corpus commun (figure 2). La suite du projet consiste à réaliser et utiliser un système d'annotation semi-automatique pour annoter et transcrire ce corpus, afin d'effectuer une confrontation des résultats en analyse d'image et en analyse linguistique.
Le projet ARC-LSF fait collaborer trois partenaires (LIMSI, INRIA Sophia, INT Evry) et est soutenu pour deux ans dans le cadre d'une Action Concertée de Recherche INRIA. L'objectif est de faire avancer l'état de l'art dans le domaine des applications informatiques dédiées à la LSF, en contribuant au développement des méthodes de capture, de reconstruction 3D et de reconnaissance de gestes. Le travail réalisé jusqu'alors a consisté à cerner les difficultés aux différents niveaux de traitements et à évaluer les manques les plus sensibles dans les différents domaines concernés. Suite à cette étude, nous avons décidé de réaliser un corpus de verbes directionnels de la LSF (figure 3), qui est destiné à l'évaluation des méthodes ou techniques développées par les chercheurs en informatique travaillant sur les LS, en particulier celles développées par les partenaires du projet.

Résultats et perspectives

Ces deux projets sont pour l'instant indépendants mais nous avons commencé à tisser des liens entre eux. Notre objectif est maintenant de mutualiser les données et les résultats des analyses. Ces deux projets devraient permettre de créer la première ressource nationale de corpus vidéo sur la LSF.

Références

[1] << Projet LS-COLIN. Quel outil de notation pour quelle analyse de la LS ? >>, collectif LS-COLIN. Colloque << Recherches sur la Langue des Signes >>, Toulouse, novembre 2001.
[2] F. Lejeune, A. Risler : << Les configurations manuelles pronominales en LSF >>. Colloque << Recherches sur la Langue des Signes >>, Toulouse, novembre 2001.

Groupe GI		Dpt CHM		Sommaire		Présentation

visiteurs.