Search results for:

Dispositif permettant le suivi du regard pendant une conversation (regard se portant sur les yeux ou sur la bouche et les yeux selon que l'on parle ou que l'on écoute). Etude et modélisation des signaux multimodaux de l'interaction humaine face-à-face. Composantes verbales et non-verbales de la communication. Application au développement d'agents conversationnels incarnés capables de s'engager dans une conversation avec des partenaires humains.

Dispositif animé par un système de pression hydraulique, qui peut être vu comme une réplique des cordes vocales humaines et permet de les étudier. Outre l'étude des interactions fluide-parois, ce dispositif s'avère particulièrement bien adapté à la simulation de pathologies des cordes vocales, notamment celles associées à une asymétrie mécanique. Cela permet de mieux comprendre et modéliser les phénomènes mécaniques et aérodynamiques qui ont lieu lors de la production de parole.

Dispositif animé par un système de pression hydraulique, qui peut être vu comme une réplique des cordes vocales humaines et permet de les étudier. Outre l'étude des interactions fluide-parois, ce dispositif s'avère particulièrement bien adapté à la simulation de pathologies des cordes vocales, notamment celles associées à une asymétrie mécanique. Cela permet de mieux comprendre et modéliser les phénomènes mécaniques et aérodynamiques qui ont lieu lors de la production de parole.

Dispositif animé par un système de pression hydraulique, qui peut être vu comme une réplique des cordes vocales humaines et permet de les étudier. Outre l'étude des interactions fluide-parois, ce dispositif s'avère particulièrement bien adapté à la simulation de pathologies des cordes vocales, notamment celles associées à une asymétrie mécanique. Cela permet de mieux comprendre et modéliser les phénomènes mécaniques et aérodynamiques qui ont lieu lors de la production de parole.

Sur l'écran, un clone parlant ayant un visage de femme, répond aux requêtes de l'utilisateur en le suivant du regard. Des capteurs laser, répartis tout autour de l'écran, repèrent le fond de ses yeux. Pour créer ce personnage, les scientifiques ont recouvert le visage d'une femme réelle, de près de 400 billes dont ils ont mesuré les déplacements pour toutes les combinaisons possibles de deux phonèmes, soit près d'un millier. Etude et modélisation des signaux multimodaux de l'interaction humaine…

Sur l'écran, un clone parlant ayant un visage de femme, répond aux requêtes de l'utilisateur en le suivant du regard. Des capteurs laser, répartis tout autour de l'écran, repèrent le fond de ses yeux. Pour créer ce personnage, les scientifiques ont recouvert le visage d'une femme réelle, de près de 400 billes dont ils ont mesuré les déplacements pour toutes les combinaisons possibles de deux phonèmes, soit près d'un millier. Etude et modélisation des signaux multimodaux de l'interaction humaine…

Dispositif expérimental utilisé pour les mesures labiales. Pour modéliser le mouvement des lèvres, les chercheurs les maquillent en bleu. Avec un système classique de traitement d'image, ils obtiennent ainsi une image parfaite de leurs mouvements.

Dispositif animé par un système de pression hydraulique, qui peut être vu comme une réplique des cordes vocales humaines et permet de les étudier. En arrière plan sur l'écran, mesure des déplacements de la maquette. Outre l'étude des interactions fluide-parois, ce dispositif s'avère particulièrement bien adapté à la simulation de pathologies des cordes vocales, notamment celles associées à une asymétrie mécanique. Cela permet de mieux comprendre et modéliser les phénomènes mécaniques et…

Dispositif permettant le suivi du regard pendant une conversation (regard se portant sur les yeux ou sur la bouche et les yeux selon que l'on parle ou que l'on écoute). Etude et modélisation des signaux multimodaux de l'interaction humaine face-à-face. Composantes verbales et non-verbales de la communication. Application au développement d'agents conversationnels incarnés capables de s'engager dans une conversation avec des partenaires humains.

Sur l'écran, un clone parlant ayant un visage de femme, répond aux requêtes de l'utilisateur en le suivant du regard. Des capteurs laser, répartis tout autour de l'écran, repèrent le fond de ses yeux. Pour créer ce personnage, les scientifiques ont recouvert le visage d'une femme réelle, de près de 400 billes dont ils ont mesuré les déplacements pour toutes les combinaisons possibles de deux phonèmes, soit près d'un millier. Etude et modélisation des signaux multimodaux de l'interaction humaine…

Dispositif expérimental utilisé pour les mesures labiales. Pour modéliser le mouvement des lèvres, les chercheurs les maquillent en bleu. Avec un système classique de traitement d'image, ils obtiennent ainsi une image parfaite de leurs mouvements.

Sur l'écran, un clone parlant ayant un visage de femme, répond aux requêtes de l'utilisateur en le suivant du regard. Des capteurs laser, répartis tout autour de l'écran, repèrent le fond de ses yeux. Pour créer ce personnage, les scientifiques ont recouvert le visage d'une femme réelle, de près de 400 billes dont ils ont mesuré les déplacements pour toutes les combinaisons possibles de deux phonèmes, soit près d'un millier. Etude et modélisation des signaux multimodaux de l'interaction humaine…

Sur l'écran, un clone parlant ayant un visage de femme, répond aux requêtes de l'utilisateur en le suivant du regard. Des capteurs laser, répartis tout autour de l'écran, repèrent le fond de ses yeux. Pour créer ce personnage, les scientifiques ont recouvert le visage d'une femme réelle, de près de 400 billes dont ils ont mesuré les déplacements pour toutes les combinaisons possibles de deux phonèmes, soit près d'un millier. Etude et modélisation des signaux multimodaux de l'interaction humaine…

Dispositif expérimental utilisé pour les mesures labiales. Pour modéliser le mouvement des lèvres, les chercheurs les maquillent en bleu. Avec un système classique de traitement d'image, ils obtiennent ainsi une image parfaite de leurs mouvements.

Sur l'écran, un clone parlant ayant un visage de femme, répond aux requêtes de l'utilisateur en le suivant du regard. Des capteurs laser, répartis tout autour de l'écran, repèrent le fond de ses yeux. Pour créer ce personnage, les scientifiques ont recouvert le visage d'une femme réelle, de près de 400 billes dont ils ont mesuré les déplacements pour toutes les combinaisons possibles de deux phonèmes, soit près d'un millier. Etude et modélisation des signaux multimodaux de l'interaction humaine…

Sur l'écran, un clone parlant ayant un visage de femme, répond aux requêtes de l'utilisateur en le suivant du regard. Des capteurs laser, répartis tout autour de l'écran, repèrent le fond de ses yeux. Pour créer ce personnage, les scientifiques ont recouvert le visage d'une femme réelle, de près de 400 billes dont ils ont mesuré les déplacements pour toutes les combinaisons possibles de deux phonèmes, soit près d'un millier. Etude et modélisation des signaux multimodaux de l'interaction humaine…

Coupe médiosagittale IRM (Imagerie par Résonance Magnétique) du conduit vocal d'un locuteur prononçant un "i". Les contours des différents articulateurs de la parole (mâchoire, langue, lèvres, palais, velum, etc.) sont tracés à l'aide d'un éditeur de courbes pour servir de base à une modélisation articulatoire de la parole et de constituer une tête parlante audiovisuelle, véritable clone du locuteur, qui sera capable de produire de la parole de synthèse.

Exemple de résultat issu du logiciel Tacle (qui sature le bleu des lèvres) permettant l'extraction des paramètres labiaux. Pour modéliser le mouvement des lèvres, les chercheurs les maquillent en bleu. Avec un système classique de traitement d'image, ils obtiennent ainsi une image parfaite de leurs mouvements.

Suivi des mouvements faciaux de la parole (voir image 2002N00157), en estimant une projection optimale du modèle articulatoire sur l'image (issue d'une microcaméra placée à 12 cm du visage. Les paramètres estimés permettent d'animer à distance le clone du locuteur (ou celui d'un autre par une procédure d'encodage / recodage des paramètres articulatoires propre à chaque clone dans le format MPEG4/SNHC) (Réf. CNRS INFO N°397 OCT-NOV 2001).

Représentation de gestes de la parole par des clones articulés qui ont l'apparence du locuteur original. Ici, un des six gestes faciaux impliqués par les mouvements de parole : fermeture / ouverture de la mâchoire. Ces clones trouvent des applications dans différents domaines : les télécommunications virtuelles, la réalité augmentée et les technologies vocales (synthèse et reconnaissance de la parole). (Réf. CNRS INFO N°397 OCT-NOV 2001).

Représentation de gestes de la parole par des clones articulés qui ont l'apparence du locuteur original. Ici, un des six gestes faciaux impliqués par les mouvements de parole : abaissement / élévation des lèvres. Ces clones trouvent des applications dans différents domaines : les télécommunications virtuelles, la réalité augmentée et les technologies vocales (synthèse et reconnaissance de la parole). (Réf. CNRS INFO N°397 OCT-NOV 2001).

Image issue d'un dispositif expérimental utilisé pour les mesures labiales. Pour modéliser le mouvement des lèvres, les chercheurs les maquillent en bleu. Avec un système classique de traitement d'image, ils obtiennent ainsi une image parfaite de leurs mouvements.

Représentation de gestes de la parole par des clones articulés qui ont l'apparence du locuteur original. Ici, un des six gestes faciaux impliqués par les mouvements de parole : étirement / arrondissement des lèvres. Ces clones trouvent des applications dans différents domaines : les télécommunications virtuelles, la réalité augmentée et les technologies vocales (synthèse et reconnaissance de la parole). (Réf. CNRS INFO N°397 OCT-NOV 2001).

Représentation de gestes de la parole par des clones articulés qui ont l'apparence du locuteur original. Ici, un des six gestes faciaux impliqués par les mouvements de parole : ouverture / fermeture des lèvres. Ces clones trouvent des applications dans différents domaines : les télécommunications virtuelles, la réalité augmentée et les technologies vocales (synthèse et reconnaissance de la parole). (Réf. CNRS INFO N°397 OCT-NOV 2001).

Suivi des mouvements faciaux de la parole en estimant une projection optimale du modèle articulatoire sur l'image (issue d'une microcaméra placée à 12 cm du visage : voir image 2002N00158). Les paramètres estimés permettent d'animer à distance le clone du locuteur (ou celui d'un autre par une procédure d'encodage / recodage des paramètres articulatoires propre à chaque clone dans le format MPEG4/SNHC) (Réf. CNRS INFO N°397 OCT-NOV 2001).

La peau transparente du clone rend visible les mouvements des organes normalement invisibles de la parole (langue, mâchoire). On se situe ici au centre de la réalisation du /t/ dans la syllabe /ta/.(Réf. CNRS INFO N°397 OCT-NOV 2001).