XR-Entwicklerfokus - PS VR2, Spiele, Hardware-Verbesserung und Gesundheitswesen

Willkommen zu diesem zweiten Beitrag in unserer Blog-Serie für XR-Entwickler. In den Bereichen VR, AR und MR tut sich eine Menge, und neue Spiele und Innovationen werden bald auf den Markt kommen. Bevor ich auf die Details eingehe, sollten Sie unbedingt unseren XR-Newsletter auf unserer XR-Entwicklerseite abonnieren, um relevante Neuigkeiten, Einblicke und mehr über die Entwicklung mit unserem Eye Tracking zu erhalten.

Die Höhepunkte

• Sony hat den Veröffentlichungstermin für PlayStation VR2 bekannt gegeben. Das Headset wird nächstes Jahr, ab dem 22. Februar, erhältlich sein. Neue und aktualisierte Titel werden Eye Tracking unterstützen,

• Ein Interview mit Principal Analyst Anshel Sag über den Wert von Eye Tracking in XR Hardware.

• Tobii und Olleyes über die Entwicklung zugänglicher und effektiver Sehhilfen mit VR und Eye Tracking.

PlayStation VR2 - eine Übersicht

Die für den 22. Februar 2023 angekündigte PS VR2 bietet ein aktualisiertes Design (einschließlich der Controller), verbesserte Ergonomie, durchsichtige Funktionen, foveated Rendering und Eye Tracking - und reiht sich damit in eine wachsende Liste von Unternehmen ein, die immersive Erfahrungen anstreben. Wenn Sie es noch nicht gesehen haben, werfen Sie einen Blick auf das Teaser-Video Feel a new real | PS VR2 (ESRB-Einstufung ausstehend).

Ich denke, es ist eine Selbstverständlichkeit, dass die Fähigkeit des Eye Tracking, dynamisches foveated rendering (DFR) zu ermöglichen, eines der besten Geschenke unserer Technologie für VR ist. Mehrere Entwickler von PS VR2-Spielen haben DFR tatsächlich eingesetzt, und ich freue mich über die vielen positiven Erfahrungsberichte, unter anderem von Virtual Reality Oasis , Eurogamer und IGN .

Unser Eye Tracking wurde auch genutzt, um Interaktionen im Spiel zu ermöglichen. In diesem Beitrag mit dem Titel " Revealing the evolution of the Firewall franchise for PlayStation VR2 " berichtet PlayStation über die Weiterentwicklung des Originalspiels mit aktualisierter Grafik und Eye Tracking-Funktionen, die es Benutzern ermöglichen, mit Spielelementen zu interagieren, z. B. Waffen zu wechseln.

In diesem Beitrag - Demeo erfindet den Spieleabend auf der PlayStation im Jahr 2023 neu - spricht Gustav Stenmark über die Nostalgie, die oft mit Spielen verbunden ist. Er erwähnt, wie das Update dieses Titels (das 2023 für PS VR2 erscheint) aktives haptisches Feedback und Eye Tracking-Funktionen enthalten wird, um das Eintauchen des Spielers zu vertiefen und die Intuitivität der Interaktionen mit Menüs und Objekten im Spiel zu verbessern. Werde in Star Wars: Tales from the Galaxy's Edge auf PlayStation VR2 zum Helden und sorge dafür, dass deine Bewegungen und deine Blickrichtung beim Spielen reflektiert werden.

Unter den 11 angekündigten neuen PS VR2-Spielen nennt PlayStation Titel wie The Dark Pictures: Switchback VR, Cosmonious High und Tentacular, die die Interaktion mit Objekten und der Umgebung auf intuitive und immersive Weise unterstützen werden.

Auf IGN, PlayStation VR2 sollte es Entwicklern erleichtern, ihre Spiele zu portieren , spricht Joe Skrebels über die vielen Funktionen, die Entwicklern zur Verfügung gestellt werden - einschließlich flexibler Skalenrasterung, Entwicklungsumgebungstools wie VR-Trace und Komfortproben. Zusammenfassend lässt sich sagen, dass PS VR2 meiner Meinung nach tiefere Interaktionen für die Nutzer und eine leichter zugängliche Erfahrung für Entwickler bieten wird, um ihre Spiele auf die Plattform zu bringen.

Hardware ist wichtig

Auf der SIGGRAPH 22 hat Douglas Lanman (Head of Display, Meta) in seiner Keynote über wahrnehmungsrealistische Erfassungs- und Anzeigesysteme die zehn größten Hürden für VR-Headsets genannt. Ich würde sagen, dass die wissenschaftliche Qualität und die umfassende Erfassung der Bevölkerung durch unser Eye Tracking dazu beiträgt, einige Probleme zu überwinden und die Rechenleistung und die Anzeigeleistung zu steigern.

Mit Tobii Spotlight for Foveated Rendering unterstützen wir bereits seit einigen Jahren Geräte für Unternehmen - Pico Neo 3 Pro Eye. HP Reverb G2 Omnicept Edition und HTC VIVE Pro Eye - und jetzt auch in Consumer-Geräten wie PS VR2 - unterstützt unsere Technologie komplexe Inhalte und bessere Grafiken bei gleichbleibenden und hohen Bildraten.

Die durch das Objektiv verursachte Bildverzerrung wird immer eine Herausforderung darstellen, zumal sich die Verzerrung mit zunehmendem Sichtfeld verschlimmert. Der statische Verzerrungsausgleich kann zwar helfen, funktioniert aber nur, wenn die Augen des Benutzers auf den Sweet Spot in der Mitte der Linsen ausgerichtet sind. Wenn eine Person ihre Blickrichtung ändert oder das Headset verrutscht, kommt es zu einer Fehlausrichtung, und statische Verzerrungstechniken können das nicht ausgleichen. Wir arbeiten an einer fortschrittlichen Technologie, die einen dynamischen Verzerrungsausgleich ermöglicht, um das bestmögliche Nutzererlebnis zu gewährleisten.

In diesem Interview lädt Sie Principal Analyst Anshel Sag ein, mehr darüber zu erfahren, wie unser Eye Tracking die Hardware-Leistung steigert, was letztendlich das Erlebnis für die Benutzer verbessert, wenn sie Ihre Spiele spielen und Ihre Anwendungen nutzen.

Anwendungsfälle

Der Einsatz von VR-Headsets mit nativen Eye Tracking- und Analyse-Funktionen ist ein zunehmend beliebter und skalierbarer Ansatz, um die Genauigkeit, Effizienz und Zugänglichkeit der Sehhilfe zu verbessern. Auf dem VRARA Gesundheitswesen Forum 2022 berichteten Alberto Gonzalez, CEO von Olleyes, und Amanda Bentley von Tobii über ihre Erfahrungen bei der Entwicklung von Produktangeboten, um Marktchancen zu nutzen und die Grenzen der Technologie zum Guten zu verschieben.

Ressourcen

Sonys Senior Directors Yasuo Takahashi und Kenjo Akiyama sprachen auf der diesjährigen CEDEC über die Spezifikationen der PS VR2 und erklärten, wie einfach es für Entwickler sein wird, ihre Spiele auf die Plattform zu portieren. Das SDK für PS VR2 ist das gleiche wie für PS5 und unterstützt Spiele, die mit den Unity- und Unreal-Engine-Entwicklungskits erstellt wurden. In meinem vorherigen Beitrag Avatare, Spiele und Pilotenausbildung habe ich ein wenig über die Entwicklung mit Unity für PS VR2 gesprochen.

Da die VR-Headsets der nächsten Generation mit integriertem Eye Tracking ausgeliefert werden, bieten sich für XR-Spiele enorme Möglichkeiten zur Optimierung des Benutzererlebnisses in Bereichen wie Interaktionen, UI, Avatare, Visuals und Grafiken. Beim jüngsten XR Bootcamp habe ich gemeinsam mit Alexander Clark (Gründer von Starcade Arcade) einen Vortrag über die Vor- und Nachteile von Eye Tracking für die VR-Entwicklung gehalten. Verpassen Sie nicht die Expertenrunde und die Frage-und-Antwort-Runde nach unserem Vortrag.

Sie können jederzeit unsere XR Devzone mit Prototypen besuchen, um herauszufinden, wie sich Eye Tracking nahtlos in Virtual-Reality-Erlebnisse einfügt, sowie unser XR SDK, mit dem Sie Eye Tracking zu Ihren Titeln und Anwendungen hinzufügen können.