Focus développeurs XR - avatars, jeux et formation des pilotes

Présentation de notre nouvelle série de blogs pour les développeurs XR

Avec les progrès rapides du matériel et des logiciels, je pense que de nombreux développeurs sont désireux de comprendre comment l'eye tracking peut aider à améliorer les interactions virtuelles, fournir de nouvelles expériences métavers innovantes et permettre aux utilisateurs d'atteindre des niveaux d'immersion encore plus profonds. C'est pourquoi j'ai lancé cette nouvelle série de blogs pour les développeurs de logiciels et de jeux XR.

Dans ce premier billet, j'ai l'intention de partager certains des projets sur lesquels notre équipe XR a collaboré, certains des projets qui me rendent fière parce que c'est comme une sorte de point de preuve lorsque vous pouvez voir la technologie que vous avez développée faire la différence pour les autres. Poursuivez votre lecture pour en savoir plus sur notre Eye tracking pour les avatars, sur le premier jeu XR à présenter l'eye tracking comme une fonctionnalité de base, ainsi que sur des présentations d'événements fascinants allant du développement de jeux de nouvelle génération à la formation de pilotes dans le monde de l'entreprise.

Je parlerai plus en détail du développement pour les appareils AR, VR et MR dans les mois à venir, alors n'oubliez pas de vous inscrire à notre newsletter XR sur notre page développeurs XR , afin d'être le premier à être informé des développements.

Avatars dans le métavers et au-delà

Des personnages de World of Warcraft aux alter ego de Second Life, l'avatar numérique est depuis longtemps un moyen pour les communicateurs en ligne, et en particulier les joueurs, de se manifester en ligne de la manière qu'ils souhaitent. Les avatars sont formidables parce qu'ils apportent la liberté d'expression dans le monde en ligne. Vous pouvez être vu comme vous le souhaitez, qu'il s'agisse d'une réplique de vous dans le monde physique ou de la conception de toutes sortes de nouveaux looks créatifs, des plus fantaisistes à ceux qui expriment ce que vous ressentez à l'intérieur.

À l'heure où nous entrons dans le monde de la réalité étendue et virtuelle, l'importance des avatars sera encore plus grande lorsque nous nous retrouverons face aux avatars virtuels d'autres personnes dans des jeux AAA de nouvelle génération pour casques VR ou dans de nouveaux outils de communication et de collaboration entre collègues.

L'Eye tracking ajoute une couche supplémentaire de réalité aux avatars et aux personnages virtuels, car il permet à XR d'émuler le contact visuel et les mouvements des yeux qui jouent un rôle important dans la façon dont les gens communiquent. En les activant dans le XR, nous étendons ces aspects essentiels de l'humanité en ligne. Le fait de permettre aux utilisateurs d'adopter des expressions plus vraies que nature et d'apparaître plus authentiquement présents renforce l'immersion possible dans le métavers.

Tobii, LIV et Ready Player Me

En mars dernier, Tobii a annoncé un partenariat passionnant avec LIV , le leader du streaming de jeux XR, et Ready Player Me , une plateforme qui permet aux utilisateurs de créer des avatars 3D à utiliser dans des centaines d'applications et de jeux XR différents.

.

Je suis tout à fait d'accord.

La première expérience réalisée dans le cadre de cette collaboration porte sur un jeu appelé Racket : Nx, qui montre comment le mouvement des yeux en temps réel de l'avatar d'un streamer permet aux spectateurs de mieux comprendre son jeu. Voir la vidéo ci-dessous

Expérimenter avec MetaHuman

MetaHuman Creator est un outil permettant de créer des personnages hyperréalistes dans Unreal Engine. Pour découvrir dans quelle mesure l'eye tracking contribue à ce réalisme, Ajinkya Waghulde, l'un de nos responsables techniques, a publié un article sur l'intégration de l'eye tracking dans les avatars MetaHuman, accompagné d'un exemple vidéo impressionnant : Démonstration d'un avatar MetaHuman de Tobii .

Jetez un coup d'œil à la façon dont Ajinkya l'a fait dans son article du blog A gaze expression experiment with MetaHuman , et pourquoi ne pas plonger dans notre zone de cas d'utilisation sociale sur notre zone de développement XR ?

Eye tracking lors d'Evènements récents

Starblazer - l'un des premiers jeux VR à mettre en avant l'eye tracking.

La semaine dernière, j'ai assisté à l'AWE USA sous le soleil de Californie avec notre équipe, rencontrant des partenaires, des développeurs et d'autres leaders de l'industrie du XR. L'un des moments les plus forts pour moi a été la présentation que j'ai faite avec nos bons amis de Starcade Arcade , qui ont parlé de Starblazer, un jeu qui tirera parti de notre Eye tracking dans la prochaine version de Starblazer, sortie cet été : Factions.

Alexander Clark, fondateur de Starcade Arcade, revient sur les principales fonctionnalités que l'eye tracking apporte au prochain rafraîchissement de Starblazer - notamment une interface utilisateur attentive et réactive et une interaction intuitive avec les objets. Il partage également les leçons qu'ils ont apprises au cours du développement, ce qui peut vous donner une longueur d'avance lors du développement de vos jeux et applications.

Ne manquez pas non plus les réponses d'Alexander aux excellentes questions posées par le public de l'AWE lors de la séance de questions-réponses qui s'est tenue à la fin de notre présentation : Construire des jeux XR de nouvelle génération avec l'eye tracking de Tobii .

Présentation d'Unity à la GDC sur la création de jeux pour le PS VR2

Cette vidéo n'est pas encore sortie des presses, mais l'ensemble de la présentation vaut la peine d'être regardée. Lors de la GDC 2022 en mars, Unity a fait une présentation fascinante sur la création de jeux de nouvelle génération pour le PlayStation VR2.

Vous ne serez pas surpris d'apprendre que ce qui a le plus attiré mon attention, c'est la déclaration de Jono Forbes, responsable principal de l'ingénierie au sein de l'équipe XR d'Unity,

" J'ai gardé pour la fin ce qui est, à mes yeux, le nouvel espace de conception le plus excitant, à savoir l'eye tracking bien sûr".

Il est toujours agréable de voir que nous ne sommes pas les seuls à être enthousiasmés par l'eye tracking, et Jono fait un excellent travail en expliquant comment Unity considère l'eye tracking comme un élément clé de la prochaine génération de casques VR. J'ai intégré la vidéo ci-dessous pour commencer à la section sur l'eye tracking, à 31m22s dans le clip, mais n'hésitez pas à revenir au début pour voir la présentation dans son intégralité.

Entreprise, Eye tracking et formation des pilotes

Une grande partie de cet article s'est concentrée sur l'aspect ludique de la XR, mais l'eye tracking a beaucoup à offrir dans d'autres domaines, comme le secteur de l'entreprise.

Un autre point fort d'AWE 2022 a été la présentation de Rick Parker - CTO de Visionary Training Ressources (VTR). Parker raconte comment VTR aide à combler une pénurie mondiale de pilotes en perturbant les premières étapes de la formation des pilotes et comment notre Eye tracking a permis le suivi des performances et démontré le retour sur investissement - aidant VTR à faire leur analyse de rentabilité auprès des grandes compagnies aériennes.

Construire une formation de pilote disruptive avec XR et l'eye tracking : Le cas VTR de l'autonomisation des grandes compagnies aériennes.

Notre zone de développement XR

Comme vous le savez peut-être, nous avons construit une devzone complète dédiée aux intégrations eye tracking en réalité augmentée, mixte et virtuelle qui propose de la documentation, des guides, des démos, et plus encore. Jetez-y un coup d'œil : Zone de développement Tobii XR .

Nous allons bientôt lancer une enquête pour recueillir les réactions et les suggestions des développeurs qui utilisent ou prévoient d'utiliser la zone de développement XR. Si vous souhaitez être inclus, veuillez vous inscrire à notre lettre d'information sur la page des développeurs XR ,