Les yeux rivés sur Qualcomm : Que nous réserve l'avenir du XR ?
Brian Vogelsang, Directeur principal de la gestion des produits pour le groupe commercial XR de Qualcomm Technologies, évoque les tendances qui font avancer le secteur XR.
Dans les années à venir, je pense que nous assisterons à une augmentation significative de l'adoption des technologies de RV et de RA, à la fois dans le secteur des entreprises et dans le monde des consommateurs. Les technologies de capteurs intelligents, comme l'eye tracking, joueront un rôle fondamental dans cette adoption. Pourquoi ? Parce que l'eye tracking peut améliorer les performances des appareils et réduire considérablement les besoins en bande passante et en traitement. Mais aussi parce qu'il permet de créer des expériences significatives pour l'utilisateur. Les développeurs d'applications, les fournisseurs de solutions et les utilisateurs commencent à s'attendre à ce que l'eye tracking devienne une norme - une attente reflétée par l'annonce par OpenXR de la première extension pour l'eye tracking, qui facilitera l'adoption multiplateforme et le développement inter-fournisseurs, réduisant ainsi les délais de mise sur le marché.
Dans ce billet, je résume les cinq principaux facteurs qui façonnent l'avenir du XR en me basant sur l'innovation actuelle et la collaboration avec nos partenaires XR.
Commençons par HTC, un partenaire de Tobii qui a mis sur le marché le premier HMD VR commercial avec Eye tracking intégré. Dans son article Eyes on HTC : Enterprise use of XR is expanding - will XR also be the new home office interface, Drew Bamford se penche sur l'avenir du travail et sur la façon dont les entreprises évaluent rapidement la technologie XR pour permettre à leur personnel de rester connecté et de se former. Il est clair que la pandémie a accéléré le besoin de solutions efficaces de collaboration à distance, en particulier celles qui peuvent offrir des expériences réalistes.
Avec les technologies Vive Sync et Eye tracking de Tobii intégrées dans son casque VIVE Pro Eye, HTC ouvre la voie à une collaboration virtuelle profondément réaliste. Les applications fonctionnant avec ce casque peuvent inclure des fonctions de communication naturelle telles que le contact visuel naturel, car l'eye tracking natif fournit les données nécessaires pour émuler avec précision les mouvements oculaires d'une personne en temps réel.
Le contact visuel est au cœur de l'interaction humaine, ce qui explique pourquoi l'eye tracking sera standard sur tous les casques VR et pourquoi les fonctionnalités développées avec l'eye tracking deviendront fondamentales dans les applications professionnelles et grand public. Après tout, qu'il s'agisse d'une réunion avec des collègues ou d'une compétition contre un adversaire virtuel, il y a quelque chose de profondément satisfaisant dans le fait de pouvoir regarder l'autre sans avoir l'air de regarder au loin comme un zombie.
En 2020, Pico a annoncé le Pico Neo2 Eye , le premier casque VR commercial autonome au monde doté d'un eye tracking natif. Dans son article Eyes on Pico : training and healthcare will accelerate enterprise XR adoption, Karen Zu souligne que les casques équipés de technologies de capteurs telles que l'eye tracking créent de nouvelles opportunités au sein des entreprises et des soins de santé - notamment la gestion de la douleur par la distraction et des thérapies telles que le traitement des phobies.
Certains types de services de santé n'ont pas besoin d'être dispensés en personne et la déréglementation dans certaines régions a entraîné une croissance des services de télésanté. Mais c'est le besoin de distanciation sociale en 2020 qui a accéléré l'adoption des soins de santé à distance. Il est également probable que l'intérêt des patients pour les soins en ligne se maintiendra après la pandémie parce qu'ils sont pratiques et permettent un accès rapide aux soins - des facteurs pertinents en particulier pour les personnes handicapées et les personnes vivant dans des régions isolées et des villes encombrées, où l'Eye tracking est parfait pour améliorer les procédures de guidage et l'assistance.
Le XR est un facilitateur de télésanté car il favorise les soins au point de besoin (où et quand) et peut fournir un retour d'information continu aux prestataires de soins de santé. Équipés d'un système d'eye tracking, les appareils XR fournissent des observations impartiales basées sur la santé oculaire, créant ainsi des opportunités pour les services liés à la détection et au suivi des maladies neurodégénératives et des traumatismes, à l'ophtalmologie et à la thérapie.
Le partenaire XR le plus récent de Tobii est HP. En septembre 2020, la société a annoncé la sortie du HP Reverb G2 Omnicept Edition . Avec l'Eye tracking intégré de Tobii, ce casque permet des expériences VR hyper-personnalisées, engageantes et adaptatives pour une utilisation en entreprise. Dans son article Eyes on HP : better HMDs, social interaction for work and life, and BYOD, Peter Peterson souligne l'importance de la personnalisation. Il prévoit que les casques XR deviendront plus personnalisables et que les fabricants d'appareils s'adresseront à des marchés spécifiques en fonction de la façon dont vous souhaitez porter un casque, de la taille de votre visage, de sa forme et de vos besoins individuels.
La personnalisation crée une opportunité pour les développeurs d'applications de construire de nouveaux services et un contenu unique qui cible les appareils XR. Il parle en outre de plus de technologie XR, et de la façon dont les éditeurs de logiciels et les développeurs indépendants travailleront ensemble pour garantir des solutions agnostiques en termes de plateforme et homogénéiser l'écosystème - ce qui va dans le sens de la collaboration de Tobii pour normaliser la partie centrale de l'eye tracking dans OpenXR.
Qualcomm, l'un de nos partenaires XR de longue date, est l'une des entreprises technologiques de semi-conducteurs les plus reconnues au monde. Ils ont intégré l'Eye tracking de Tobii dans plusieurs générations de leurs conceptions de référence - y compris la plus récente (2020) Tobii Eye tracking dans la nouvelle conception de référence Qualcomm Snapdragon XR2 5G.
Dans son article intitulé "Eyes on Qualcomm : Que nous réserve l'avenir de la technologie XR ? Brian Vogelsang parle de l'importance d'un concept appelé Boundless XR , dans lequel le traitement sur l'appareil peut être déchargé vers, par exemple, un serveur périphérique ou même un serveur cloud via une liaison 5G à faible latence ou vers un PC via Wi-Fi. Ce type de connectivité transparente avec une architecture de rendu fractionné est essentiel pour l'adoption de la RV et de la RA, car il prend en charge les graphiques de haute qualité et le traitement hors appareil.
Tobii Spotlight for Foveated Transport exploite le regard, l'optique et les points d'intérêt visuels pour permettre une réduction massive des besoins en bande passante dans le pipeline de rendu graphique. Le niveau de gain attendu garantira la diffusion de graphiques de haute qualité sur l'ensemble de l'écran du casque (et pas seulement au centre), ce qui améliorera le confort de l'utilisateur et garantira des expériences de qualité sur les réseaux mobiles, contribuant ainsi à l'adoption de la RV mobile.
D'ici 1 à 3 ans, j'envisage une augmentation massive des performances des appareils XR avec un Eye tracking permanent comme élément central de la conception. Des solutions telles que Tobii Spotlight Technology™ amélioreront les appareils car elles permettent une utilisation efficace des capacités graphiques et de la bande passante dans les HMD connectés sans limites, ainsi que la prise en charge des interactions naturelles telles que le contact visuel et les paradigmes d'interface utilisateur et d'interaction améliorés par le regard. Tobii fournit des plateformes d'Eye tracking pour toutes les conceptions optiques du matériel XR, qu'il s'agisse d'une lentille de Fresnel VR standard, d'une lentille compacte (pancake) ou de conceptions AR, afin de s'adapter aux différents besoins des divers marchés.
L'Eye tracking natif fournit un ensemble d'analyses qui peuvent être exploitées par les applications pour résoudre des problèmes auparavant insolubles. C'est pourquoi je m'attends à une forte croissance des applications dans les domaines de la santé, de la formation, de la collaboration et de la recherche. Pour répondre à ces attentes, Tobii a récemment présenté Tobii Ocumen , une solution d'eye tracking haut de gamme qui réunit deux décennies d'expérience et d'expertise afin d'optimiser le développement d'applications VR spécialisées. Parce que Tobii Ocumen fournit des observations de haut niveau, il fait gagner du temps de développement, réduisant le délai de mise sur le marché des applications et permettant aux développeurs de matérialiser leurs innovations de manière abordable.
Le niveau actuel de développement, l'innovation des ISV et l'investissement des fabricants de casques que j'ai mentionnés dans ce billet ne sont que quelques indications de l'adoption croissante des technologies XR, avec des technologies habilitantes telles que la 5G et le "edge cloud" (nuage de périphérie) qui font désormais partie de l'écosystème XR.