Por qué el eye tracking será estándar en todos los cascos de RV
En este post, analizamos el impacto de la virtualización en la colaboración remota y por qué los desarrolladores de aplicaciones están construyendo para eye tracking.
Según la Encuesta de la Industria XR 2019, los tres principales componentes y funciones que impulsarán la adopción de XR son 1) comodidad y usabilidad de los auriculares, 2) campo de visión y 3) Eye tracking. El diseño del último casco de RV de HP, el HP Reverb G2 Omnicept Edition, cumple los tres requisitos. Con un campo de visión de 114 grados, Eye tracking, monitorización de la frecuencia cardiaca con un sensor PPG y una cámara facial para captar los movimientos de los labios, creo que este casco es una clara representación de la próxima generación de RV.
La edición Omnicept, basada en un casco ya de por sí fantástico, el HP Reverb G2, es un casco comercial capaz de captar información imparcial, lo que permite aplicaciones avanzadas de RV en formación, bienestar, diseño y colaboración.
Como director de gestión de productos de Tobii para XR OEM, el proyecto de desarrollo de este casco ha sido una gran experiencia porque me ha permitido colaborar estrechamente con HP. El objetivo de mi equipo era integrar nuestra plataforma de Eye tracking Tobii VR4, mejorando el casco con la tecnología de Eye tracking de Tobii y garantizando la fusión con los demás sensores nuevos.
En este post, comparto algunas de las ideas que hay detrás de este nuevo y excepcional auricular, por qué es relevante ahora, junto con algunas de las reflexiones y experiencias de las personas con las que colaboré en HP: Henry Wang (director de producto) y Lauren Domingo (ingeniera de campo de Software).
Uno de los elementos esenciales para la transformación digital y la optimización operativa (Industria 4.0) son los datos significativos en tiempo real. Para satisfacer la necesidad de datos, casi todas las cosas están equipadas con sensores, dispositivos discretos que generan silenciosamente billones de puntos de datos imparciales. Encabezada por HP Reverb G2 Omnicept Edition, la próxima generación de auriculares de realidad virtual incluirá sensores que crearán nuevas entradas para el desarrollo de aplicaciones.
Lauren y Henry ¿cómo ve la evolución del mundo de los sensores? HP Reverb G2 Omnicept Edition establece un nuevo estándar, pero ¿cómo evolucionarán los auriculares a partir de ahora?
Uno de los efectos secundarios de la Industria 4.0, con su optimización de la productividad y la automatización, es un cambio constante en los requisitos de cualificación y una necesidad persistente de reeducación. Un estudio realizado por la Universidad de Maryland , en Estados Unidos, concluyó que las tasas de retención de información son más altas en la educación virtualizada que en el aprendizaje tradicional basado en ordenador. Me identifico con esto porque la inmersión y el realismo de algunas experiencias de RV hacen que el aprendizaje sea emocionante y memorable. La inmersión en la RV me permite centrarme en la tarea, y su autenticidad me ayuda a adquirir una comprensión práctica de los nuevos conceptos. Al añadir movimiento físico y amplitud de movimiento a la mezcla, la RV puede ayudarme, por ejemplo, a desarrollar la destreza necesaria para nuevas tareas.
Cuando se trata de habilidades especializadas, como procedimientos quirúrgicos o gestión de situaciones de estrés, parece que las personas que se forman con RV cometen menos errores que las que se educan por medios tradicionales.
Lauren y Henry El entrenamiento es una de las cuatro áreas clave identificadas para el desarrollo de este casco. Pueden hablarnos de la información que proporcionan los datos de los sensores y de por qué resulta tan atractiva para el entrenamiento en RV?
La fusión de sensores diferencia a HP Reverb G2 Omnicept Edition del resto de auriculares. Los datos agregados de los sensores ayudarán a los desarrolladores de aplicaciones a personalizar la experiencia de RV aprovechando las respuestas naturales del usuario, eliminando las barreras y la aprensión que algunas personas asocian con la Realidad virtual/mixta.
Puede que no siempre nos demos cuenta, pero normalmente nos presionamos más allá de nuestra capacidad para procesar información nueva en situaciones desconocidas. Con la práctica, nos familiarizamos y nuestra carga cognitiva disminuye hasta niveles manejables. La RV ofrece un espacio controlado para practicar, un entorno realista y seguro en el que podemos repetir, aprender y minimizar los errores.
Lauren y Henry ¿podría explicarnos por qué decidió incluir el Eye tracking en estos auriculares?
El repentino cambio a trabajar desde casa ha contribuido a mitigar el impacto económico de la COVID-19. La aparición de la HP Reverb H2 Omincept Edition es un testimonio de la capacidad humana para colaborar en nuevas circunstancias. Y los dos últimos meses han puesto de manifiesto la necesidad de modernizar y mejorar la colaboración virtual. Las estimaciones varían, pero hasta el 40% de los puestos de trabajo en EE.UU. podrían ser a domicilio. Tras la pandemia, parece probable que entre el 20% y el 30% (frente al 5% anterior a la pandemia) de los trabajadores sigan trabajando desde casa.
Este cambio ha creado una oportunidad para que XR ofrezca un conjunto avanzado de herramientas de colaboración digital que incorporan expresiones faciales, lenguaje corporal y tono de voz. Mejorada con los datos necesarios para interpretar los movimientos musculares y las señales visuales para una interacción natural, HP Reverb H2 Omnicept Edition sitúa la colaboración en RV en una nueva trayectoria.
Para conseguir que el eye tracking y otros sensores se comuniquen y generen datos sin sesgar, no es raro que los ingenieros tengan que aplicar soluciones alternativas combinando manualmente las tecnologías existentes. Con HP Reverb G2 Omnicept Edition ya no tendrán que hacerlo. Este auricular permite obtener información con un dispositivo comercial sin necesidad de recurrir a estas soluciones.
Lauren y Henry ¿puede decirnos lo fácil que es empezar a desarrollar aplicaciones que aprovechen la funcionalidad de los auriculares HP Reverb G2 Omnicept Edition?
En estos momentos, estamos evaluando la tecnología Tobii Spotlight for Foveated Rendering en el HP Reverb G2 Omnicept Edition. Las pruebas iniciales muestran resultados notables, con un ahorro medio de carga de sombreado cercano al 66%¹. Este nivel de ahorro ofrece a los desarrolladores la oportunidad de aumentar la claridad visual y el rendimiento de las aplicaciones donde más se necesita.
Esta prueba también respalda nuestra afirmación sobre la estrecha relación entre las ventajas del renderizado foveated y el aumento de la resolución de pantalla.
Lauren y Henry ¿Qué opina de nuestra tecnología de renderizado foveated?
Aunque este post no es un análisis del HP Reverb G2 Omnicept Edition, no creí que estuviera completo sin algunos datos. En cuanto a la forma, estos auriculares tienen los mismos componentes básicos que los HP Reverb G2, con la misma pantalla de gran nitidez y las lentes líderes del sector de Valve. Lo que distingue a este casco es la fusión de sensores, que combina datos sin procesar de la plataforma de eye tracking Tobii VR4 integrada con sensores PPG y de cámara facial para ofrecer un análisis de la carga cognitiva.
Comentarios finales de Lauren y Henry:
Más información sobre Eye tracking de Tobii y HP Reverb G2 Omnicept Edition .
En este post, analizamos el impacto de la virtualización en la colaboración remota y por qué los desarrolladores de aplicaciones están construyendo para eye tracking.
Desde el lanzamiento de Tobii Ocumen en 2020, hemos colaborado con multitud de empresas que trabajan para comercializar sus innovaciones en RV. He aquí nuestros cinco mejores.
En este artículo para desarrolladores de XR, Johan Bouvin resume el impacto de nuestro eye tracking en los próximos cascos de realidad virtual.