Prototype Agents incarnés

Greta – Un avatar conversationnel d'une réalité à l'autre

Greta, la jardinière de DiverSSity, devient un personnage 3D qui parle et que l'on peut rencontrer dans sa propre pièce avec un casque de réalité mixte, ou dans un navigateur web, sans casque.

Pourquoi

Beaucoup de nos projets reposent sur des personnages qui écoutent et répondent à voix haute. Avec Greta, nous travaillons cette interaction pour elle-même : comment un personnage mène une conversation, réagit pendant qu'on lui parle et paraît présent dans une vraie pièce. Elle est notre banc d'essai pour la voix, la parole expressive et le comportement d'avatar, sur plusieurs appareils à la fois.

Greta, une jardinière au style dessin animé avec un bob jaune et un foulard violet, devant un fond de ciel dans un navigateur web, en train de lire un texte à voix haute. Un panneau en dessous indique qu'elle lit avec une voix émerveillée et chaleureuse, avec les boutons Pause, Interrompre et Relire et un champ pour lui écrire.
Greta dans la version web, en train de lire une histoire à voix haute avec une voix émerveillée et chaleureuse.

Trois façons de la rencontrer

  • Dans votre pièce

    En réalité mixte, sur Meta Quest 3 et 3S et PICO 4 Ultra. Elle se tient sur le vrai sol, et les meubles peuvent la cacher.

  • Dans le navigateur

    Une page web avec le même personnage et la même voix, sans casque.

  • Sur un moteur ouvert

    Une version réalisée avec le moteur open source Godot, pour les casques Quest.

Ce qu'elle sait faire

  • Tenir une conversation dans le rôle d'un personnage d'un scénario CareConverse, par exemple pour présenter le laboratoire aux visiteurs.
  • Lire un texte à voix haute avec émotion, joyeuse, chuchotée, etc., en suivant des indications dans le texte.
  • Se comporter comme quelqu'un qui écoute : elle vous suit du regard, se tourne vers vous, cligne des yeux, bouge les lèvres en parlant, affiche des sous-titres et s'arrête quand on l'interrompt.

Technologie

  • Réalité mixte : Unity 6 avec OpenXR et AR Foundation ; aussi une version Godot 4.
  • Web : une page statique avec un modèle 3D, sans installation.
  • Voix : via CareConverse (Google Gemini Live et voix Gemini), ou via un serveur vocal qui utilise les modèles de parole et de langage de Mistral (services cloud).