In the case of eye tracking, other parameters such as the speed of gaze movement or the frequency of fixation make it possible to distinguish the subject's cognitive distraction. As well as measuring pupil dilation, which is activated by the sympathetic system in situations that could endanger the organism.Blog BITBrain (https://www.bitbrain.com/blog/multimodal-research)
:quality(75))
Série « Eye tracking pour les nuls » - n° 7
Pour comprendre le comportement humain, il ne suffit pas de se contenter d'observer les actions. En associant l'eye tracking à des mesures biométriques telles que l'EEG, la fréquence cardiaque, la réponse galvanique de la peau et l'analyse des expressions faciales, les chercheurs obtiennent une vision plus complète de l'attention, des émotions et de la charge cognitive.
Cette intégration multimodale permet de mieux comprendre comment les individus traitent l'information et réagissent à leur environnement. À mesure que son adoption se généralise, elle influence la recherche et la prise de décision dans les domaines des neurosciences, de l'expérience utilisateur (UX), de la Santé et des études de consommation.
Pourquoi associer l'eye tracking à la biométrie ?
Eye tracking permet de déterminer où les gens posent leur regard et comment ils interagissent visuellement avec leur environnement. Mais pour comprendre pourquoi ils regardent ainsi et ce qu'ils ressentent ou pensent à ce moment-là, les données biométriques apportent les informations manquantes.
Par l'intégration de signaux physiologiques, tels que l'activité cérébrale (EEG), la fréquence cardiaque (ECG/PPG) et la (GSR)et la dilatation de la pupille, les chercheurs peuvent mesurer :
Charge cognitive: Degré d'exigence mentale d'une tâche.
Réaction émotionnelle: Joie, stress, frustration ou enthousiasme.
Niveaux d'attention: Le fait qu'une personne soit réellement concentrée ou distraite.
Cette approche multimodale offre un aperçu en temps réel et non invasif de l'expérience humaine, ce qui est essentiel pour concevoir des produits, des systèmes de formation et des environnements améliorés.
Tendances émergentes dans la recherche multimodale
Des recherches récentes indiquent que l'association de l'eye tracking à la biométrie améliore la précision et la sensibilité de l'évaluation de la charge de travail mentale et des états émotionnels. Par exemple, une étude réalisée en 2024 par l'université de Drexel a utilisé six modalités biomédicales, telles que l'EEG, l'eye tracking et la fréquence cardiaque, pour mesurer les performances cognitives dans six domaines, notamment la mémoire de travail, la vigilance et la conscience situationnelle.
Par ailleurs, des logiciels expérimentaux tels que Tobii Pro Lab permettent une synchronisation parfaite des données d'eye tracking avec les données biométriques fournies par des partenaires tels que
Brain Products, Bitbrain et MindWare Technologies. Les chercheurs peuvent recouper les données de suivi du regard avec celles de l'EEG, de l'ECG, de l'EMG et de la GSR afin d'analyser la corrélation entre l'attention visuelle et les réponses physiologiques, tant en laboratoire que dans des conditions réelles.
Comment Tobii favorise l'intégration multimodale
Tobii propose un écosystème solide dédié à la recherche multimodale :
Tobii Pro Spectrum: un système d'eye tracking de haute précision conçu pour les études avancées sur le comportement humain. Il recueille des données détaillées sur les mouvements oculaires et se synchronise facilement avec d'autres modalités, telles que l'EEG, Motion Capture ou la biométrie, ce qui en fait un outil puissant pour la recherche multimodale.
Tobii Pro Lab: Une plateforme complète conçue pour l'étude du comportement humain. Elle sert de centre névralgique pour l'enregistrement, la synchronisation et l'analyse des données d'eye tracking ainsi que des flux biométriques.
Tobii Pro Glasses 3: Eye trackers portables destinés à des études menées dans des environnements dynamiques.
Intégrations matérielle avec des partenaires: Compatible avec les systèmes d'EEG (BrainAmp, LiveAmp), les capteurs physiologiques (GSR, ECG, EMG) et les logiciels d'analyse avancée.
Ces outils permettent aux chercheurs de :
Segmenter les données en fonction du comportement du regard (par exemple, visites dans les zones d’intérêt, taille de la pupille).
Effectuer des analyses EEG liées à la fixation.
Éliminer les essais non pertinents en fonction des schémas de regard.
Fusionnez et exportez des ensembles de données synchronisés pour une analyse plus approfondie.
Applications dans tous les secteurs d'activité
UX et HCI: Mesurer le niveau de frustration ou d’engagement lors des interactions numériques.
Santé: Évaluer la charge cognitive chez les chirurgiens ou détecter les premiers signes de troubles neurologiques.
Éducation: Surveiller l'attention et le niveau d'anxiété des élèves pendant les cours et les examens.
Marketing: Comprendre l’impact émotionnel des publicités et du placement de produit.
Automobile: Détecter en temps réel la fatigue et la distraction du conducteur.
L'avenir de l'analyse multimodale
À mesure que la fusion des capteurs et l'analyse basée sur l'intelligence artificielle évoluent, les intégrations multimodales deviendront plus accessibles et plus évolutives.
À mesure que le domaine évolue, cette approche pourrait contribuer à obtenir des résultats tels que :
Détection des émotions en temps réel dans les environnements grand public.
Systèmes d'entraînement adaptatifs basés sur la charge cognitive.
Des interfaces neuroadaptatives qui s'adaptent à l'état de l'utilisateur.
Une utilisation accrue dans des domaines où la sécurité est primordiale, tels que l'aviation et la robotique.
Faire progresser la compréhension du comportement grâce aux données multimodales
L'intégration multimodale ouvre de nouvelles perspectives pour la compréhension du comportement humain. La combinaison de l'eye tracking et des données biométriques offre un contexte plus riche concernant l'attention, les émotions et la cognition que n'importe quelle mesure prise isolément. Grâce aux outils de Tobii et à ses partenariats de recherche, l'analyse comportementale continue de gagner en clarté, en fiabilité et en pertinence par rapport au monde réel.
Participez à notre Webinaire pour découvrir les dernières avancées en matière de recherche sur l'eye tracking
Découvrez comment l'association de l'eye tracking aux données physiologiques et comportementales permet d'obtenir des informations plus approfondies sur le comportement humain.
En savoir plus sur les outils multimodaux et la recherche
:quality(75))
Renforcer la recherche comportementale grâce à des laboratoires sur mesure et des outils multimodaux
Combler le fossé entre l'expertise et l'infrastructure : Une plongée dans les institutions de recherche mondiales équipées par Noldus de l'Eye tracking de Tobii.
:quality(75))
Eye tracking et EEG
Un guide facile pour intégrer vos données multimodales. La session est consacrée à la fusion de l'eye tracking et de l'EEG à l'aide du Brain Vision Analyzer 2 de Brain Products.
:quality(75))
Solutions de recherche multimodales
Notre logiciel d'analyse propose un processus complet de co-enregistrement, comprenant des méthodes de synchronisation et des outils de fusion des données.
:quality(75))
EEG stationnaire et Eye tracking avec Brain Products
Dans ce Webinaire, notre partenaire Brain Products partagera ses fantastiques connaissances et son expérience en matière de combinaison de données EEG et d'eye tracking à des fins d'analyse.
:quality(75))