Traitement automatique des langues des signes

Les Langues des Signes (LS) sont des langues naturelles pratiquées au sein des communautés de Sourds et la Langue des Signes Française (LSF) est celle utilisée en France. Ce sont des langues visuo-gestuelles : une personne s’exprime en LS en utilisant de nombreuses composantes corporelles (les mains et les bras, mais aussi les expressions du visage, le regard, le buste, etc.) et son interlocuteur perçoit le message par le canal visuel. Le système linguistique des LS exploite ces canaux spécifiques : de nombreuses informations sont exprimées simultanément et s’organisent dans l’espace, et l’iconicité joue un rôle central. À ce jour, les LS n’ont pas de système d’écriture ni de système graphique standard pour la transcription. Elles sont encore peu décrites et peu dotées (très peu d’ouvrages de référence, lexiques limités, connaissances partielles sur la grammaire, peu de ressources en général). La modélisation informatique des LS nécessite de concevoir des représentations dans un domaine où peu de données sont disponibles et où les modèles pré-existants, essentiellement linéaires, ont été développés pour les langues écrites ou parlées et ne couvrent pas tous les aspects des LS.
Nos questions de recherche couvrent les aspects suivants : Comment prendre en compte les spécificités linguistiques liées à leur nature visuo-gestuelles (multilinéarité, spatialisation, iconicité) pour une modélisation linguistique ? Comment analyser, représenter et traiter automatiquement les langues des signes ? Quelles types d’approches sont possibles avec peu de données de langue des signes française (LSF) ? 
Les vidéos ci-dessous illustrent certaines de nos études.