home
Rechercher

Les 5 principales innovations commerciales en matière de RV rendues possibles par Tobii Ocumen

  • Blog
  • par Robert Malmström
  • 6 min

Mon poste de chef de produit pour Tobii Ocumen m'a permis d'être aux premières loges de la convergence de la RV et de l'Eye tracking, et j'ai eu l'occasion de me rapprocher de certaines des solutions étonnantes qui en résultent. Depuis 2020, date à laquelle nous avons lancé
Tobii Ocumen - notre boîte à outils VR avancée - nous avons passé du temps à remanier le code pour en assurer la robustesse, et nous nous sommes engagés avec des développeurs de différentes spécialités et disciplines, en les aidant à commercialiser des solutions VR qui tirent parti de notre technologie d'eye tracking et de la biométrie avancée, ainsi que des outils de développement et de déploiement inclus dans le produit.

Dans ce billet, je partagerai cinq des solutions commerciales qui me semblent les plus innovantes et qui ont été développées avec Tobii Ocumen - dans l'espoir que vous puissiez reconnaître les problèmes que leurs innovateurs ont résolus et les obstacles qu'ils ont surmontés. Au bas de l'article, vous trouverez des détails sur la boîte à outils, sur le fonctionnement des filtres et sur la façon dont nous avons développé la structure des données pour garantir une architecture ouverte. Vous trouverez également un lien pour demander un essai gratuit si Tobii Ocumen est utile à votre recherche, application ou solution. Bonne lecture !

#1 Évaluation des commotions cérébrales - NeuroSync

L'un de nos premiers clients à utiliser Tobii Ocumen a été NeuroSync (anciennement SyncThink). Comme le souligne Scott Anderson (chef des services cliniques) dans une interview réalisée en 2021 (
) , l'un des principaux avantages de la RV est la mobilité. NeuroSync a développé une solution - EYE-SYNC® - qui aide les cliniciens à évaluer les lésions cérébrales traumatiques (TBI). Non seulement la RV apporte la solution directement sur les lignes de touche du terrain de football ou de la patinoire de hockey, mais son environnement fermé la rend idéale pour aider les gens à ignorer les influences extérieures, qui peuvent être intenses lors d'Evènements sportifs en direct. M. Anderson mentionne la mesure précise et systématique des mouvements oculaires et la façon dont ils ont utilisé les filtres de haut niveau inclus dans Tobii Ocumen pour faciliter le travail de transformation des données brutes d'eye tracking en biomarqueurs fiables.

Tobii Ocumen facilite l'exécution de notre logiciel et la réalisation de nos analyses. Tout est filtré pour nous. Toutes les données du regard à haute fréquence sont capturées, traitées et filtrées - une étape que nous n'avions pas pu utiliser auparavant. Lorsque les données nous parviennent, elles sont prêtes à être mises en œuvre. Il s'agit d'un gain de temps considérable qui permet de mettre les données brutes dans un format consommable.
Scott Anderson, directeur clinique, NeuroSync

#2 Performance cognitive - REACT Neuro et Aperion Life

Avec le vieillissement de la population mondiale, l'importance des performances cognitives retient de plus en plus l'attention, car nous essayons d'assurer la qualité de vie et de mettre en place des thérapies pour les maladies neurodégénératives telles que la maladie d'Alzheimer, la SLA et la maladie de Parkinson. REACT Neuro est un développeur de plateforme basé à Cambridge qui a travaillé sur le passage des tests cognitifs traditionnels à la RV. Dans le cadre d'un essai visant à déterminer les effets d'un mode de vie sain sur les performances cognitives, Apeiron Life (une startup de la Silicon Valley) a utilisé la simulation en RV de REACT Neuro du test classique sur papier.

L'application s'appuie sur la biométrie avancée de Tobii Ocumen pour révéler les saccades et les fixations qui ne peuvent pas être observées manuellement. La robustesse de nos données garantit que les performances peuvent être suivies dans le temps.

Depuis la conclusion de l'essai, les deux entreprises se sont montrées enthousiastes quant au potentiel des mesures approfondies générées par les technologies de capteurs avancées telles que l'eye tracking, le motion tracking, les spiromètres, l'EEG et les capteurs thermographiques, et quant à la manière dont la tendance générale au bien-être garantira que certaines de ces technologies avancées seront diffusées auprès du grand public.

Dans ce test classique, notre technologie révèle la structure du regard de la personne et le temps qu'elle consacre à chaque tâche secondaire. Plus les cercles sont grands (dans l'image de droite), plus la personne a besoin de temps pour réfléchir au chiffre suivant. Dans les tests manuels, seul le temps de réalisation peut être mesuré.
Dans ce test classique, notre technologie révèle la structure du regard de la personne et le temps qu'elle consacre à chaque tâche secondaire. Plus les cercles sont grands (dans l'image de droite), plus la personne a besoin de temps pour réfléchir au chiffre suivant. Dans les tests manuels, seul le temps de réalisation peut être mesuré.
L'extraction des données à haute résolution associées aux mouvements des yeux et des mains n'est tout simplement pas possible avec l'observation manuelle traditionnelle. La nouvelle technologie permet d'observer le fonctionnement du cerveau de manière unique et, espérons-le, significative.
Dr. David Martin, scientifique en chef, Apeiron Life

Vous pouvez lire l'histoire complète dans cet article de blog : Les performances cognitives au fil des décennies de la vie .

#3 Formation basée sur la RV - Cineon Training

Les chiffres varient, mais certaines sources prévoient un déficit mondial de 80 000 pilotes formés au cours de la prochaine décennie. Cette pénurie est due à une multitude de facteurs : licenciements et retraites anticipées au cours de la période covide, diminution du nombre de pilotes militaires (entraînant une baisse de la disponibilité pour l'aviation civile), reprise de l'industrie du voyage après la période covide, et installations de simulation affichant complet, car leur construction est coûteuse et les tarifs horaires montent en flèche.

Cineon Training , une entreprise britannique, a développé une application basée sur la RV (TACET) pour renforcer les compétences en communication et accélérer l'acquisition de compétences. Elle utilise l'eye tracking et les signaux avancés de Tobii Ocumen pour améliorer l'efficacité du temps passé dans le simulateur.

Avec l'aimable autorisation de Cineon Immersive Training
Avec l'aimable autorisation de Cineon Immersive Training

TACET utilise Tobii Ocumen sur un Pico Neo 3 Pro Eye - casque VR non attaché équipé de l'Eye tracking de Tobii - connecté à une solution cloud Microsoft Azure pour le téléchargement et l'examen des enregistrements. L'image montre comment un expert exécute une tâche (lignes vertes) par rapport à un novice (lignes blanches).

L'un des principaux enseignements est l'impact de l'eye tracking sur la solidité des compétences acquises. D'autres partenaires nous l'ont également dit. L'eye tracking est une fenêtre ouverte sur l'esprit. Il nous permet d'évaluer les émotions et les sentiments et d'accélérer l'apprentissage. Lors de l'acquisition d'une nouvelle compétence, la possibilité de voir comment vos yeux se déplacent (ce sur quoi vous vous concentrez) et de comparer avec la façon dont un expert effectue le travail aide à résoudre le problème cognitif. Cela permet également aux personnes qui sont déjà douées pour quelque chose d'affiner leurs solutions.

L'eye tracking et la RV sont les principaux outils de recherche que notre laboratoire utilise pour développer des outils innovants pour la formation dans l'aviation et d'autres industries à haut risque. Tobii Ocumen nous permet de développer nos outils uniques, beaucoup plus efficacement, en consacrant plus de temps à notre cœur de métier, et moins à la programmation.
Dr. Sam Vine, cofondateur de Cineon Training et professeur associé à l'université d'Exeter

#4 La transformation numérique dans le secteur MedTech - Olleyes

En tant qu'outil numérique qui fournit des informations sur les personnes, l'eye tracking contribue à transformer les soins traditionnels basés sur l'observation manuelle dans la sphère numérique. Comme je l'ai mentionné précédemment, dans l'évaluation des commotions cérébrales de NeuroSync, la RV apporte le bonus de la mobilité, ce qui conduit souvent à des solutions très flexibles.

Tobii Ocumen a été utilisé sur un casque Pico Neo 3 Pro Eye VR pour fournir une évaluation complète du champ visuel, en analysant la sensibilité rétinienne, par exemple, pour les patients atteints de glaucome. Ils ont mis au point une série de tests oculaires qu'une personne peut effectuer rapidement (quelques minutes au lieu de plusieurs heures), qu'elle soit allongée ou assise, ce qui accroît la flexibilité de la solution et le nombre de personnes qu'une clinique peut évaluer chaque jour. Comme beaucoup d'autres acteurs du secteur MedTech, Olleyes cherche à rendre les solutions plus pratiques en permettant le passage à la maison .

Si vous voulez en savoir plus sur notre collaboration avec Olleyes, je vous recommande cet entretien du forum VRARA Santé avec ma collègue Amanda Bentley et le PDG d'Olleyes Alberto Gonzalez Construire des soins de la vue plus accessibles et plus efficaces.

Notre plateforme de réalité virtuelle VisuALL (VRP) fournit des tests automatiques, objectifs et standardisés de la fonction visuelle. Notre partenariat avec Tobii nous permet d'augmenter encore la précision de notre technologie. Tobii Ocumen nous a aidés à développer et à déployer nos offres de produits et constitue une avancée dans l'automatisation de l'évaluation de la fonction visuelle.
Alberto Gonzalez, PDG, Olleyes

#5 Formation des pilotes - VTR

Pour pouvoir piloter un nouveau type d'avion, par exemple un Boeing 737 ou un Airbus A320, les pilotes ont besoin d'un certificat de qualification de type (une licence). Pour apprendre la position et la fonctionnalité de tous les instruments, ils utilisent généralement ce que l'on appelle des "tigres en papier", c'est-à-dire des maquettes du cockpit. Les tigres peuvent être des écrans tactiles avancés, mais ils ont tendance à être coûteux et à ne pas donner une impression réaliste de l'espace en 3D. Cette situation n'est pas idéale pour les pilotes qui disposent généralement de deux à trois semaines pour apprendre un nouveau type d'avion et la signification de chaque voyant, bouton, interrupteur et jauge dans le cockpit. Le manuel d'un Boeing 737, par exemple, compte environ 2 000 pages.

Pour pallier la faible validité écologique des tigres en papier, VTR a mis au point une simulation VR qui reproduit fidèlement l'environnement du poste de pilotage afin de garantir une solide acquisition de compétences. L'entreprise a collaboré avec JetBlue, l'une des plus grandes compagnies aériennes des États-Unis, afin d'obtenir des données sur les cas d'utilisation pour étayer le retour sur investissement.

Pour en savoir plus sur VTR, je vous recommande cette conférence AWE avec mon collègue Johan Bouvin et Rick Parker, l'un des cofondateurs de VTR . Construire une formation de pilote innovante avec XR et l'eye tracking.

À propos de Tobii Ocumen

Ces cinq cas d'utilisation très innovants sont commercialement viables parce qu'ils exploitent la nature fermée de la RV, sa mobilité et le réalisme offert par le médium pour fournir une solution rentable. Et tous ont été développés à l'aide de Tobii Ocumen.

Qu'apporte donc Tobii Ocumen pour permettre le développement de telles applications ?

Signaux et filtres avancés

Tobii Ocumen offre des signaux avancés d'eye tracking, notamment :

  • Vecteurs du regard (yeux gauche et droit séparés).

  • Diamètre de la pupille (œil gauche et droit séparés).

  • Horodatage de haute précision du système et de l'appareil.

  • Métadonnées, telles que le matériel d'eye tracking, le micrologiciel et les versions du logiciel d'exécution.

La bibliothèque de filtres, que nos clients semblent vraiment apprécier, fournit des composants de filtres prévalidés et basés sur la recherche pour détecter les mouvements oculaires tels que les fixations, les saccades et la poursuite fluide. Ces filtres transforment les données capturées par notre matériel d'eye tracking en blocs de construction de biomarqueurs standard.

Calibrage et positionnement

Pour que Tobii Ocumen fournisse des données de qualité et que les images s'affichent correctement, les casques VR doivent être placés correctement sur la tête de l'utilisateur, et notre eye tracking doit être calibré en fonction de l'individu.

Pour faciliter le processus d'étalonnage et de positionnement, nous avons développé des fonctions intéressantes que vous pouvez intégrer directement dans votre application afin que les utilisateurs n'aient pas à suivre les étapes fastidieuses consistant à quitter votre application, à lancer un processus d'étalonnage/de positionnement distinct, puis à le reprendre.

Calibration de l'Eye tracking pour l'intégration dans une application
Calibration de l'Eye tracking pour l'intégration dans une application
Un guide simple pour le positionnement du casque
Un guide simple pour le positionnement du casque

Enregistrement et relecture

Pour faciliter le développement, Tobii Ocumen combine les données contextuelles, telles que les mouvements d'objets en 3D et la vidéo vue par l'utilisateur, avec les données de capteurs issues de l'Eye tracking avancé et les événements des contrôleurs dans un format unique.

Nous avons inclus quelques enregistreurs et modèles prêts à l'emploi pour des paradigmes d'études de recherche courants que vous pouvez rapidement intégrer dans votre projet Unity. Et pour vous aider à rejouer, nous avons développé Tobii Ocumen Studio (voir la vidéo ci-dessous), qui présente les données enregistrées (contexte et capteur) dans un format visuel facile à comprendre.

Intégrations matérielles

Lors du développement récent de Tobii Ocumen, nous avons fait des efforts sur la structure des données, en optimisant la vitesse et la taille des fichiers et en créant une architecture de produit flexible avec une interface d'E/S ouverte. Le produit prend en charge la conversion des données et vous pouvez facilement importer des données recueillies par n'importe quel appareil ou machine, quel que soit le langage de programmation que vous préférez.

Je pense que notre relation profonde avec la communauté de la recherche scientifique mérite d'être mentionnée. De ce fait, nous sommes parfaitement conscients de la nécessité de disposer de données de validation de qualité scientifique pour les solutions commerciales qui nécessitent une certification réglementaire. Nos validations portent sur la couverture de la population, l'exactitude, la précision et les performances en matière de traçabilité.

AWE USA 2023 - Santé et bien-être : Perturber les soins de santé, la formation, et plus encore.

AWE USA 2023 - Santé et bien-être : Perturber les soins de santé, la formation, et plus encore.

Liens utiles

Demande d'essai gratuit de Tobii Ocumen

Nous offrons un essai gratuit de 14 jours pour les demandes qualifiées d'entreprises à entreprises (B2B), et non pour les particuliers.

    Écrit par

    • Robert Malmström

      Robert Malmström

      Product Manager Tobii Ocumen

      Hi, I am the product manager for Tobii Ocumen, which means I get to work closely with our development teams and customers to determine when and what features we should create or improve. It’s my job to ensure that our products are functional and intuitive without creating a burden for developers. I believe in the enjoyment factor. It should be fun and easy to make XR applications while getting the most out of a headset that includes our technology.

    Contenu connexe