Geste

Membres impliqués:

·    Patrick Horain, coordonnées
·    Sesh Kumar Karri (CDD),
·    David Antonio Gómez Jáuregui, Manoj Kumar Rajagopal, Daniel Wesierski, (Doctorants)

 

Mots Clés :

Acquisition du geste, suivi du visage, perception, vision artificielle, calculs accélérés par processeur graphique (GPU), environnement collaboratif virtuel.

Description de l’activité :

Ce projet a pour ambition d'étudier la perception des êtres humains par la machine. Il étend le précédent projet GESTE en intégrant, outre la communication gestuelle, le traitement du visage et de la voix. Nous développons des technologies grand public et robustes pour l'acquisition du geste humain en 3D par vision artificielle monoscopique, la perception des expressions et la reconnaissance du visage, voire la reconnaissance d'émotions. Pour la mise en œuvre en temps réel, nous développons et diffusons des outils de calcul sur GPU.

 

Résultats marquants

Démonstrateur sur PC grand public de perception des gestes et des expressions du visage et leur restitution distante virtuelle (projet MyBlog3D).

Voir : Demo

Applications visées

Communication non-verbale médiatisée par la machine

Téléprésence virtuelle, interaction gestuelle homme-machine (ex. : robot)

Projets en cours

 

Projet européens :

Projet Feder :

 

  • Juliette : Perception Visuelle des Personnes pour l’Interaction entre l’Homme et le Robot (Projet FEDER coordonné par Bernadette Dorizzi, 2010-2013).

 

Projets ANR :

  • MyBlog3D: To foster mutual perception between internet users who communicate and share objects within a 3D virtual space (2006-2010). Voir : http://myblog3d.com.
  • MediaGPU : Massive multimedia GPU-based processing (2010-2013). Voir : http://picoforge.int-evry.fr/projects/mediagpu

Projets Fondation Télécom :

  • GpuCV-valo: Open-source GPU-accelerated image processing and Computer Vision library (2010). Voir : http://picoforge.int-evry.fr/projects/gpucv
  • Gestes de communication : acquisition et synthèse hybrides (bourse de thèse Futur et Ruptures pour Manoj Kumar Rajagopal, 2009-2011)

Patrick HORAIN est co-organisateur de l’action spécifique Geste et Action du GDR ISIS du CNRS.

Thèses en cours

·    David Antonio Gómez Jáuregui,
·    Manoj Kumar Rajagopal, 

.    Daniel Wesierski

Recrutement d'un CDD (mis en ligne le 25/11/2010):

 http://www-public.telecom-sudparis.eu/~horain/OffreCDD.html

Modifié le novembre 25, 2010