Retour au reportage Retour au reportage
20170135_0036

© Cyril FRESILLON / GIPSA-lab / CNRS Images

Référence

20170135_0036

Installation d'un casque de réalité virtuelle

Installation d'un casque de réalité virtuelle qui permettra au chercheur de voir à travers les yeux du robot Nina, placé dans une autre pièce. Ce casque, également muni de capteurs de mouvements du regard et de la tête est associé à des capteurs sur la bouche, à un microphone mais aussi à des caméras dédiées à la capture de mouvement. Ils vont permettre au robot Nina de reproduire en temps réel tous les gestes, expressions faciales et mots prononcés par le chercheur. Ce dernier voit en stéréo à travers les yeux du robot, équipés de caméras et entend en stéréo grâce aux microphones dans les oreilles de Nina. En plus de sa possible utilisation en télé-présence immersive, cette phase de pilotage, répétée un grand nombre de fois, permet au robot d'enregistrer les mouvements subtils de l’interaction face-à-face (contact visuel, synchronisation regard/parole, points d’intérêt, tours de parole, lecture labiale…) en vue de les imiter de manière autonome par la suite. Cet apprentissage s'effectue via des algorithmes de deap learning. Nina pourra ensuite interagir de manière naturelle et socialement acceptable. Ceci lui permettra par exemple de participer à des campagnes de dépistage de problèmes de mémoire (maladie d'Alzheimer, début de démence…) en faisant passer des tests de mémoire.

Délégation(s)

CNRS Images,

Nous mettons en images les recherches scientifiques pour contribuer à une meilleure compréhension du monde, éveiller la curiosité et susciter l'émerveillement de tous.