Modèle descriptif des signes pour un traitement automatique des langues des signes. (A descriptive model of signs for Sign Language processing)

Les approches formelles de representation des signes des langues des signes sont majoritairement parametriques et nous montrons en quoi celles-ci ne sont pas suffisantes dans l'optique d'une utilisation informatique. Les plus fortes raisons sont le caractere ni necessaire ni suffisant de l'ensemble de parametres traditionnellement utilise, leur nature fixe alors qu'un signe est dynamique et evolue au cours du temps, et le fait que les descriptions ne rendent pas compte de l'adaptabilite des signes decrits a differents contextes, pourtant a l'origine de leur reutilisabilite et de la force de concision des langues des signes. Nous proposons Zebedee, un modele de description en sequence d'unites temporelles decrivant chacune un ensemble de contraintes necessaires et suffisantes, appliquees a un squelette. L'espace de signation est vu comme un espace euclidien dans lequel toute construction geometrique annexe est possible. Les dependances entre elements des descriptions ou sur des valeurs contextuelles sont non seulement possibles mais pertinentes, et reposent sur des considerations a la fois articulatoires, cognitives et semantiques. Nous donnons ensuite deux processus complementaires d'evaluation : en informatique ou nous discutons l'implantation de Zebedee dans une plateforme d'animation de signeur virtuel et son utilisation pour la diffusion d'informations en gare, et en linguistique ou nous decrivons l'avantage d'une base de donnees et les nouvelles possibilites de requetes offertes au linguiste. En perspectives, nous citons plusieurs domaines informatiques ou Zebedee sera utile et plusieurs questionnements linguistiques actuels auxquels il offre des pistes de reponse.

[1]  W. Stokoe,et al.  A dictionary of American sign language on linguistic principles , 1965 .

[2]  Annelies Braffort.  ARGo: An Architecture for Sign Language Recognition and Interpretation , 1996, Gesture Workshop.

[3]  Norman I. Badler,et al.  Real-Time Inverse Kinematics Techniques for Anthropomorphic Limbs , 2000, Graph. Model..

[4]  Michael Filhol,et al.  A sequential approach to lexical sign description , 2006 .

[5]  Olivier Losson.  Modélisation du geste communicatif et réalisation d'un signeur virtuel de phrases en langue des signes grançaise , 2000 .

[6]  P. Dalle,et al.  High level models for sign language analysis by a vision system , 2006 .

[7]  David A. Forsyth,et al.  Skeletal parameter estimation from optical motion capture data , 2004, 2005 IEEE Computer Society Conference on Computer Vision and Pattern Recognition (CVPR'05).

[8]  Norman I. Badler,et al.  Real-Time Inverse Kinematics of the Human Arm , 1996, Presence: Teleoperators & Virtual Environments.

[9]  W. Stokoe,et al.  Sign language structure: an outline of the visual communication systems of the American deaf. 1960. , 1961, Journal of deaf studies and deaf education.

[10]  Norman I. Badler,et al.  Inverse kinematics positioning using nonlinear programming for highly articulated figures , 1994, TOGS.

[11]  Richard Kennaway,et al.  Experience with and Requirements for a Gesture Description Language for Synthetic Animation , 2003, Gesture Workshop.

[12]  Catherine N. Ball,et al.  Representation of american sign language for machine translation , 2002 .

[13]  F. Bonnal-Vergès.  Etymologie et langue des signes francaise (LSF) , 2006 .

[14]  Marie-Anne Sallandre,et al.  Les unités du discours en Langue des Signes Française. Tentative de catégorisation dans le cadre d'une grammaire de l'iconicité. , 2003 .

[15]  Annelies Braffort,et al.  Spatialised Semantic Relations in French Sign Language: Toward a Computational Modelling , 2005, Gesture Workshop.

[16]  Richard Kennaway,et al.  Synthetic Animation of Deaf Signing Gestures , 2001, Gesture Workshop.

[17]  T. Humphries,et al.  A Basic Course in American Sign Language , 1981 .

[18]  Jean Véronis,et al.  French Sign Language Processing: Verb Agreement , 2005, Gesture Workshop.

[19]  Michael Filhol,et al.  Signing avatar : say hello to Elsi! , 2007 .

[20]  Scott K. Liddell.  Grammar, Gesture, and Meaning in American Sign Language , 2003 .

[21]  Stéphane Menardais.  Fusion et adaptation temps réel de mouvements acquis pour l'animation d'humanoi͏̈des synthétiques , 2003 .

[22]  R. Boulic,et al.  Cinématique Inverse pour Personnage en 3D, Solutions analytiques et variationnelles , 2001 .

[23]  Aaron Hertzmann,et al.  Style-based inverse kinematics , 2004, ACM Trans. Graph..

[24]  Thierry Lebourque.  Specification et generation de gestes naturels , 1998 .

[25]  Boris Lenseigne.  Intégration de connaissances linguistiques dans un système de vision : application à l'étude de la langue des signes , 2004 .

[26]  Alexis Héloir,et al.  Captured Motion Data Processing for Real Time Synthesis of Sign Language , 2005, Gesture Workshop.

[27]  Sylvie Gibet,et al.  A Complete System for the Specification and the Generation of Sign Language Gestures , 1999, Gesture Workshop.

[28]  Danielle Bouvet.  Le corps et la métaphore dans les langues gestuelles, à la recherche des modes de production des signes , 1997 .

[29]  Gracaliz Pereira Dimuro,et al.  Paving the Way to Sign Language Processing , 2003 .

[30]  Yann Mathet.  Etude de l'expression en langue de l'espace et du deplacement : analyse linguistique, modelisation cognitive et leur experimentation informatique , 2000 .

[31]  Christopher Miller.  La phonologie dynamique du mouvement en langue des signes québécoise , 2000 .

[32]  Constantine Stephanidis,et al.  Universal access in the information society , 1999, HCI.

[33]  Anne Braffort,et al.  Reconnaissance et comprehension de gestes, application a la langue des signes , 1996 .

[34]  Alexis Heloir.  Système de communication par agent virtuel : aide à la communication des personnes sourdes , 2008 .

[35]  Thomas Hanke,et al.  iLex - A tool for Sign Language Lexicography and Corpus Analysis , 2002, LREC.

[36]  Scott K. Liddell,et al.  American Sign Language: The Phonological Base , 2013 .

[37]  Mitchell P. Marcus,et al.  Generating american sign language classifier predicates for english-to-asl machine translation , 2006 .