Projet porté par Jean-Luc SCHWARTZ, directeur de recherche CNRS, Grenoble Image Parole Signal Automatique (GIPSA-Lab).

 

Coordination of orofacial and gestural sensori-motor maps enabling the emergence of communication between avatars and humans

 
COG-SPEECH, 2007

Accueil > Soutien à la recherche > Pilotage d’appels à projets CNRS > Projets retenus > 2007

 

Projet

La communication parlée n’est pas simplement du son, ni simplement du langage,
ni même simplement la mise en relation entre du son et du langage, mais la coordination complexe entre des gestes orofaciaux, des percepts audiovisuels et des unités linguistiques qui assurent la communication. Le projet Cog-Speech vise à intégrer des capacités sensorielles, motrices et cognitives en un tout cohérent, dans le cadre d’un problème central pour la communication et l’interaction : la deixis, qui est la capacité de montrer des objets, des lieux ou des gens et de partager ces informations avec les partenaires d’interaction.

Disciplines

Neurobiologie, Automatique, Sciences du langage, Informatique.

Partenaires

  • GIPSA-Lab, CNRS - Université de Grenoble, UMR 5216
  • E-MOTION, INRIA Rhône-Alpes
  • Laboratoire de psychologie et neurocognition (LPNC), UMR 5105

Réalisations

Revues à comité de lecture

Schwartz, J.L., Basirat, A., Ménard, L., & Sato, M. (2010). The Perception for Action Control Theory (PACT) : a perceptuo-motor theory of speech perception. Journal of Neurolinguistics.

Chapitres d’ouvrages

Serkhane J., Schwartz J.-L., Bessière P. (2008). Building a Talking Baby Robot : A
Contribution to the Study of Speech Acquisition and Evolution. In P. Bessière (Ed.)
Probabilistic Reasoning and Decision Making in Sensory-Motor Systems, pp. 329-357.

Moulin-Frier, C., Schwartz, J.L., Diard, J., & Bessière, P. Emergence of articulatory-acoustic systems from deictic interaction games in a “Vocalize to Localize” framework. In : Vilain, A., Schwartz J.L., Abry C. and Vauclair J. (eds.), Primate Communication and Human Language : Vocalisation, gestures, imitation and deixis in humans and non-humans. 2011. vi, 239 pp., pp. 193–220.

Communications

Moulin-Frier, C., Schwartz, J.L., Diard , J., & Bessière, P. (2008). Emergence du langage par jeux déictiques dans une société d’agents sensori-moteurs en interaction. XXVIIèmes Journées d’Étude sur la Parole.

Moulin-Frier, C., Schwartz, J.L., Diard , J., & Bessière, P. (2008). Emergence of a language through deictic games within a society of sensori-motor agents in interaction. International Symposium on Speech Production.