Zoom sur les développeurs du XR - Tobii Ocumen, jeux VR et design d'interaction

Le temps passe vite depuis notre dernière mise à jour, mais nous sommes toujours ravis de voir comment l'eye tracking a été appliqué à de nouveaux domaines d'utilisation et a inspiré des innovations dans de nouvelles industries. N'oubliez pas de vous inscrire à notre liste de diffusion pour être le premier à recevoir des informations pertinentes, des idées et bien plus encore sur le développement avec l'eye tracking de Tobii.

Les points forts :

• Succès de Tobii Ocumen et conférences de l'AWE

• Jeux VR avec Eye tracking

• Conception d'interactions basées sur le regard

Tobii Ocumen favorise les innovations

Depuis son lancement il y a deux ans, Tobii Ocumen a donné naissance à de nombreuses innovations qui perturbent les approches conventionnelles et améliorent l'efficacité dans divers secteurs. Les développeurs utilisent le cadre qu'il fournit pour enregistrer, organiser et analyser les données biométriques, ainsi que pour construire et développer rapidement des produits VR de qualité scientifique dans des domaines tels que l'évaluation de la santé, la thérapeutique et la formation.

Gaize est une société de logiciels qui s'efforce de résoudre le problème des conducteurs et des travailleurs sous l'emprise de la drogue. Ken Fitchler, PDG de Gaize, a partagé la scène avec nous à AWE USA 2023 pour explorer les possibilités de la convergence de la RV et de l'Eye tracking pour comprendre les conditions humaines et développer des solutions révolutionnaires.

D'autres exemples de réussite dans le domaine de la santé, de la formation et d'autres secteurs utilisant Tobii Ocumen ont été présentés lors d'une autre conférence de l'AWE par Amanda Bentley et Robert Malmström de Tobii.

Si Tobii Ocumen semble utile pour votre cas d'utilisation, consultez notre page produit et notre site développeur pour trouver plus d'informations. Nous vous encourageons également à profiter de notre essai gratuit pour découvrir comment Tobii Ocumen peut renforcer votre solution.

Les jeux VR tirent parti de l'eye tracking

Cette année, nous avons constaté une tendance croissante à l'utilisation de l'eye tracking dans les jeux VR afin d'optimiser la puissance de calcul des casques VR et de créer des interactions plus naturelles.

L'eye tracking de Tobii a permis un rendu dynamique par fovéation pour de nombreux appareils XR. À l'instar du fonctionnement de nos yeux et de notre cerveau dans le monde physique, la puissance de calcul des appareils XR ne peut se concentrer que sur les endroits où nos yeux révèlent notre attention. Les économies réalisées peuvent alors être utilisées pour d'autres tâches essentielles, telles que le maintien d'un taux de rafraîchissement élevé, indispensable à l'exécution de contenus exigeants tels que les jeux. Ces économies seront exponentielles pour les futurs appareils XR au fur et à mesure que l'affichage passera à 8K, 16K et au-delà.

"Le rendu fovéal sur PS VR2 peut apporter une réduction massive de l'utilisation du GPU tout en produisant la même qualité perceptuelle - et, combiné à la technologie de l'Eye tracking, les gains de performance sont encore meilleurs... Nous avons également constaté des gains jusqu'à 3,6 fois plus rapides lorsque le rendu fovéal est combiné à l'eye tracking."

-- Unité

En exploitant le pouvoir de nos yeux et la compréhension intuitive des signaux visuels, les appareils XR peuvent permettre un niveau d'interaction naturel et immersif avec les environnements virtuels. Mieux encore, ils y parviennent sans que les utilisateurs aient à apprendre de nouveaux comportements.

Voici quelques commentaires des médias :

" Vous pouvez sélectionner les choix de dialogue avec les personnages en regardant simplement une option et en appuyant sur un bouton du visage au lieu de balayer avec une molette analogique. C'est tellement fluide que j'ai presque oublié que je le faisais parfois - et je ne veux plus jamais revenir en arrière. "

-- The Verge

"Et dans un jeu comme Horizon : Call of the Mountain, vous pouvez utiliser le suivi du regard pour naviguer dans les menus. Et très vite, j'ai trouvé que c'était bien mieux que votre type standard de pointeur de regard avec le head tracking... J'ai trouvé que c'était tellement plus facile et tellement plus intuitif et naturel d'utiliser simplement mes yeux pour déplacer le curseur..."

- Tested d'Adam Savage .

"... le regard fugace était si crucial pour me donner l'impression que j'étais vraiment là, qu'un personnage me faisait vraiment la gueule, que je ne pouvais pas m'empêcher de me perdre dans l'instant.... C'est le genre d'immersion que je n'avais pas ressentie dans la réalité virtuelle depuis longtemps."

- WIRED

Pour aider les développeurs à mieux exploiter l'eye tracking, Tobii a donné une conférence à la GDC 2023 sur la manière de repousser les limites de l'immersion dans les jeux de nouvelle génération grâce à un eye tracking et un head tracking de pointe. Elle vous permet de plonger en profondeur dans la technologie de l'eye tracking et du head tracking et dans ses cas d'utilisation dans les jeux pour PC et appareils XR. Des conseils et astuces pour éviter les pièges de la conception sont également fournis pour aider les développeurs à mieux adopter cette technologie afin d'améliorer l'immersion dans leurs jeux.

Conception d'interactions basées sur le regard

Cette tendance à utiliser l'eye tracking pour créer une interaction et une expérience utilisateur optimisées n'a pas seulement été observée dans les jeux, mais aussi dans des domaines d'utilisation plus larges avec le lancement récent de Vision Pro d'Apple. Une fois de plus, l'eye tracking est validé comme une technologie essentielle dans le domaine de l'XR.

Si vous souhaitez rattraper cette tendance et concevoir des interactions basées sur le regard, vous devriez consulter notre DevZone , où vous trouverez des informations sur les éléments fondamentaux utilisés pour concevoir l'eye tracking dans la RV, ainsi que des conseils et des astuces sur ce que vous devez prendre en compte lors de la conception de cas d'utilisation basés sur le regard.

Il convient également de mentionner qu'Unity a ajouté la prise en charge de l'Eye tracking à la version XRI2.3 . Tobii a contribué aux concepts et à la recherche et est fier de contribuer au prochain niveau de prise en charge des développeurs.

Ressources

Enfin, je voudrais vous laisser quelques documents sélectionnés qui pourraient vous intéresser.

Le rendu par fovéation est une technique de rendu qui révolutionne la façon dont nous vivons la réalité virtuelle. En ne rendant que les images de la plus haute qualité dans la zone où l'utilisateur regarde, cette technique permet de réduire considérablement la puissance de traitement nécessaire au fonctionnement d'un casque VR, ce qui se traduit par de nombreux avantages en termes de performances, tels qu'une plus grande fluidité, des écrans de plus haute résolution ou même une plus longue durée de vie de la batterie.
Lisez notre article de blog sur le rendu par fovéation pour en savoir plus .

Si vous travaillez sur une étude d'eye tracking, interprétez les données et tirez des conclusions sur les résultats de votre étude, l'article récent de ma collègue Ieva Miseviciute intitulé Types of eye movements vous sera très utile.

Le Dr Walter Greenleaf est l'expert en AR/VR médicale du laboratoire d'interaction humaine virtuelle de Stanford. Il a récemment prononcé un discours inspirant sur la RV, l'apprentissage automatique et la biodétection qui convergent pour transformer les soins de santé : Virtual Reality, Machine Learning, Biosensing - Converging to Transform Santé (Réalité virtuelle, apprentissage automatique, biodétection - converger pour transformer la Santé). Il aborde non seulement la tendance détaillée de ces technologies importantes, mais indique également un avenir dans lequel la confluence de ces technologies se traduit par des soins de santé abordables, évolutifs et plus efficaces.

Bon développement et jusqu'à la prochaine mise à jour !