Commande à distance du robot Nina

Commande à distance du robot Nina. Le chercheur est doté d'un casque de réalité virtuelle muni de capteurs de mouvements du regard et de la tête. Ce casque est associé à des capteurs de mouvements labiaux et à un dispositif composé d'un microphone et de caméras dédiées à la capture de mouvement, au premier plan de l'image. Le chercheur commande ainsi à distance les actions du robot Nina, placé dans une autre pièce. Il voit en stéréo à travers les yeux du robot, équipés de caméras et entend en stéréo grâce aux microphones dans les oreilles de Nina. Le petit robot reproduit ainsi en temps réel tous les mouvements de tête, de regard ainsi que les phrases prononcées par le chercheur, avec leur articulation. En plus de sa possible utilisation en télé-présence immersive, cette phase de pilotage, répétée un grand nombre de fois, permet au robot d'enregistrer les mouvements subtils de l’interaction face-à-face (contact visuel, synchronisation regard/parole, points d’intérêt, tours de parole, lecture labiale…) en vue de les imiter de manière autonome par la suite. Cet apprentissage s'effectue via des algorithmes de deap learning. Nina pourra ensuite interagir de manière naturelle et socialement acceptable. Ceci lui permettra par exemple de participer à des campagnes de dépistage de problèmes de mémoire (maladie d'Alzheimer, début de démence…) en faisant passer des tests de mémoire.