Une nouvelle ère pour l'eye tracking avec des algorithmes d'IA sur NPU

En début d'année, Tobii a lancé Tobii Nexus , un logiciel d'eye tracking ou d'oculométrie basé sur une webcam et alimenté par l'IA pour les intégrations de périphériques et d'applications. Alors que nous repoussons les limites de ce qui est possible avec la technologie d'eye tracking, la puissance de traitement nécessaire pour exécuter efficacement les algorithmes d'IA est devenue plus critique que jamais.

En plus des unités centrales traditionnelles, nous utilisons désormais du nouveau matériel, comme les unités de traitement neuronal (NPU), lorsqu'elles sont disponibles. Ce changement apporte des opportunités uniques pour les fabricants d'appareils et les développeurs d'intégrer l'eye tracking dans leurs produits. Voici pourquoi cette avancée est importante.

Host NPU : Accélérer les performances de l'IA

Les NPU accélèrent les charges de travail d'IA, offrant une augmentation significative des performances lors de l'exécution de modèles d'apprentissage profond et d'algorithmes de vision complexes. L'intégration de nos algorithmes pour qu'ils s'exécutent sur Intel NPU apporte des avantages clés, notamment :

• Performance économe en énergie : L'un des principaux avantages des NPU est leur capacité à traiter des tâches d'intelligence artificielle en consommant moins d'énergie que les CPU. Dans nos tests de laboratoire, un Intel NPU a démontré une consommation d'énergie 3 fois inférieure et un traitement 46% plus rapide par rapport à l'exécution sur le CPU. Cette efficacité est cruciale pour les appareils alimentés par batterie tels que les ordinateurs portables et les appareils médicaux portables, où la durée de vie de la batterie est prolongée sans sacrifier les performances.

• Disponibilité optimisée de l'unité centrale : Le fait de décharger les tâches d'IA sur des NPU spécialisés libère le CPU pour d'autres fonctions critiques, ce qui améliore l'efficacité des performances et la durée de vie de la batterie.

Il est important de noter que si les intégrations matérielles sont de plus en plus nombreuses dans les ordinateurs portables et les tablettes, toutes ne l'incluent pas encore. S'il est disponible, l'algorithme de Tobii s'exécute automatiquement sur le NPU d'Intel et se rabat sur le CPU lorsqu'il ne l'est pas. Cela permet aux développeurs et aux équipementiers de bénéficier de l'accélération matérielle pour l'eye tracking sans modifier radicalement leurs architectures existantes.

Edge AI : NPU de faible puissance à proximité de l'appareil photo

À mesure que les appareils alimentés par l'IA s'orientent vers l'informatique périphérique - où les appareils de faible puissance et de faible encombrement gèrent directement le traitement en temps réel - les Edge AI NPU deviennent de plus en plus importants. Ces unités sont conçues pour un traitement ultra-efficace sur les appareils de périphérie, ce qui les rend idéales pour des produits tels que les ordinateurs portables, les moniteurs, les appareils IoT et les applications mobiles.

Voici comment l'exécution des algorithmes d'Eye tracking de Tobii sur les NPU Edge offre de grands avantages :

• Amélioration de la confidentialité des données : Les NPU Edge AI permettent aux algorithmes d'IA de traiter les images des caméras et de produire des données sur le regard sans que ces images n'atteignent la carte de calcul principale. Ceci est particulièrement important pour les appareils ou les écrans où la confidentialité des données est cruciale.

• Consommation d'énergie minimale : Les Edge AI NPU sont optimisés pour une faible consommation d'énergie, ce qui les rend parfaitement adaptés aux appareils pour lesquels l'autonomie de la batterie est cruciale. La technologie d'eye tracking peut ainsi être intégrée dans des appareils plus petits et plus portables, comme les téléphones et les ordinateurs portables, sans vider la batterie.

• Performance en temps réel : Les solutions Edge AI gèrent le pipeline de l'image, du capteur au traitement, en supprimant le traitement de l'image qui s'effectue aujourd'hui au niveau du système d'exploitation. Cette configuration est cruciale pour un eye tracking à faible latence et à taux de rafraîchissement élevé. Par exemple, les moniteurs ou téléphones stéréoscopiques pourraient offrir une expérience 3D sans faille et une interaction basée sur le regard.

Les avantages pour les OEM et les ISV : flexibilité et pérennité

En prenant en charge les algorithmes d'IA qui peuvent s'exécuter sur les CPU, les NPU Intel et les NPU Edge AI, l'Eye tracking de Tobii offre aux OEM et aux ISV plusieurs avantages clés :

• Optimisation des performances : Les OEM et les ISV peuvent sélectionner l'architecture de traitement qui correspond le mieux aux exigences de performance et d'énergie de leur produit, qu'il s'agisse d'un appareil haut de gamme utilisant une Intel NPU pour un suivi ultra-rapide et haute-fidélité ou d'un appareil mobile fonctionnant avec une Edge AI NPU pour un traitement en périphérie.

• Évolutivité entre les appareils : Grâce à la prise en charge de plusieurs architectures matérielles, les développeurs peuvent créer des solutions verticalement évolutives qui s'exécutent efficacement sur tous les appareils, des ordinateurs de bureau haut de gamme aux appareils IoT légers. Cette polyvalence réduit le temps de développement en permettant à un seul modèle d'IA de s'exécuter sur différents produits.

• Coûts et efficacité énergétique : L'exécution de tâches d'IA sur des NPU spécialisées comme celles d'Intel ou d'Edge AI NPU permet aux équipementiers de proposer des fonctionnalités hautes performances basées sur l'IA sans avoir à sur-spécifier le CPU, ce qui permet de réduire les coûts et de maîtriser la consommation d'énergie.

Une nouvelle frontière pour l'eye tracking alimenté par l'IA.

Nous sommes ravis de voir comment notre intégration avec les NPU redessine l'avenir de la technologie de l'eye tracking. En permettant à nos algorithmes d'IA de fonctionner de manière transparente entre le CPU, l'Intel NPU et l'Edge AI NPU, nous permettons aux OEM et aux ISV de créer des produits plus intelligents, plus rapides et plus économes en énergie.

Que vous cherchiez à renforcer l'accessibilité, à améliorer l'évaluation des soins de santé ou à créer des expériences utilisateur plus intuitives, nos algorithmes d'eye tracking sont conçus pour fournir des informations précises et en temps réel sur la plateforme matérielle qui répond le mieux à vos besoins. Nous nous engageons à fournir la flexibilité et les performances nécessaires pour répondre aux demandes évolutives de l'industrie.

Vous voulez le voir en action ? Téléchargez une démo . Lorsqu'ils sont exécutés sur des appareils équipés d'Intel NPU, nos algorithmes de Webcam Eye Tracking Tracking exploitent automatiquement l'unité de traitement neuronal.

Ce n'est que le début, et nous sommes impatients de nous associer à vous pour lancer la prochaine vague d'innovation !