Pourquoi
Les enfants avec un trouble du spectre de l'autisme ou un TDAH profitent d'exercices réguliers et motivants qui soutiennent leur développement moteur, cognitif, sensoriel et émotionnel. DiverSSity amène ces exercices dans l'environnement réel de l'enfant plutôt que dans un monde virtuel à part : le casque montre la pièce telle qu'elle est, et les activités y apparaissent.
Les activités
Magic Garden
Un jardin apparaît derrière la vraie fenêtre de la pièce. L'enfant récolte des graines, arrose les plantes et parle avec Greta, la jardinière.
Magic Aquarium
Un exercice de concentration et d'exploration : l'enfant touche les bulles qui montent dans des aquariums placés dans la pièce.
Magic Jam
L'enfant tranche des fruits lancés à travers la pièce, avec un score à battre.
Magic Party
L'enfant distribue du gâteau aux invités d'une fête et reconnaît ce que ressent chacun d'eux.
Salle Snoezelen
Un espace calme pour la régulation sensorielle, où revenir entre deux activités.
Comment ça marche
Le casque scanne la pièce et place chaque activité sur des surfaces réelles. Chaque activité vise des objectifs émotionnels, sensoriels, cognitifs ou moteurs. Greta, la jardinière, écoute et répond à voix haute, grâce à la reconnaissance vocale, à un modèle de langage et à la synthèse vocale. Chaque séance est enregistrée avec notre version de XRXP : un·e thérapeute peut ainsi voir la pièce, les déplacements de l'enfant et les scores de chaque activité, et suivre la séance en direct. Un tableau de bord pour les thérapeutes est en cours de développement.
Qui le développe
AppiTech développe la plateforme dans le cadre d'un projet Innosuisse, en étroite collaboration avec DiverSSity SA. Le projet associe aussi une équipe de direction artistique pour l'univers visuel et le gameplay, des designers sonores de l'EDHEA et un·e psychologue de la Clinique Dis7.
Technologie
- Unity 6 sur Meta Quest, avec le Meta XR SDK et ses outils de compréhension de la pièce.
- Conversation vocale via un serveur vocal qui utilise les modèles de parole et de langage de Mistral (services cloud).
- Enregistrement des séances et vue en direct avec notre version de XRXP.