アイトラッキングがAIに人間の文脈を与える仕組み

  • ブログ
  • によって Tobii
  • 6 分

AI and eye tracking

※翻訳ソフトを使用しています。

人工知能は、言語の解釈、物体の認識、画像の分析、そして膨大なデータからパターンを特定することができます。しかし、世界を理解することは、人間と円滑に連携するAIシステムを構築するための、ほんの一部に過ぎません。

AIには、その世界の中心にいる人物に関する文脈も必要です。

彼らは何に注目しているのでしょうか?

彼らは何を見落としているのだろうか?

その瞬間、彼らにとってどの情報が重要なのでしょうか?

課題や環境と関わり合う中で、彼らの注意はどのように変化するのでしょうか?

アイトラッキングは、こうした人間的な情報を加えることができます。

眼球運動を視線方向や注意の指標に変換することで、 アイトラッキング は、 AIモデルが が分析し、注意、行動、および 認知処理を特定し、AIシステムが、人々が周囲の世界とどのように関わり合っているかについて、より深い理解を構築する一助となります。

アイトラッキングとAIを組み合わせることで、単に
周囲を認識するだけにとどまらない。さらに、その環境にいる人物のことも考慮に入れることができるのです。

Human AI experience

アイトラッキングはAIにどのような価値をもたらすのでしょうか?

AIシステムはますますマルチモーダル化が進んでいます。単一の情報種に依存するのではなく、テキスト、音声、画像、動画、オーディオ、センサーデータなどの入力を組み合わせて、より複雑な状況を理解するようになっています。

アイトラッキングは、もう一つの入力要素、すなわち視覚的注意をもたらします。

AI機能を搭載した スマートグラスを例に考えてみましょう。カメラは、システムが着用者の視野内にある物体、人物、テキストを認識するのに役立ちます。マイクは、音声による質問を拾うことができます。その他のセンサーは、動きや周囲の環境に関する情報を提供します。

しかし、もし着用者がこう尋ねたらどうでしょう:

"これについてもっと詳しく教えていただけますか?"

一度に複数のオブジェクトが表示される場合があります。ユーザーがどこを見ているかを把握することで、システムが「これ」が何を指しているかを判断するための追加の手がかりとなります。

しかし、その価値は単一の視線ポイントにとどまらない。

眼球運動 情報を検索したり、文章を読んだり、タスクを遂行したり、出来事に対応したり、注意を移したりするにつれて、眼球の動きは変化します。アイトラッキングにより、こうしたパターンを測定可能にし、AIシステムが利用できる他の情報を補完するデータを生み出します。

アイトラッキングは、瞳孔の大きさの変化を測定するために利用できます。

視線から文脈へ

アイトラッキングでは、視線の位置、注視、サッカード、 まばたき、および 瞳孔の大きさといった信号を測定します。

これらの測定結果だけでは、その人が何を考えているのか、あるいはなぜ何かを見ているのかが自動的にわかるわけではありません。その意味は、人、課題、そして環境によって異なります。そうした文脈が重要なのです。

ある対象に視線を向けることは、興味の表れである場合もあれば、視覚的な探索の一環である場合もあります。また、視線の動きの変化は、タスク全体を通じて捉えた場合に意味を持つことがあります。それはすべて状況次第です。

ここで、マルチモーダルAIが特に重要になってきます。

言語処理は、その人が何を言っているかに関する情報を提供することができます。コンピュータビジョンは、環境内に何が存在するかに関する情報を提供することができます。アイトラッキングは、その人が視覚的にどのように環境と関わっているかに関する情報を提供することができます。その他のセンサーは、動き、行動、あるいは周囲の状況に関するさらなる情報を補完することができます。

これらのシグナルを組み合わせることで、AIシステムは文脈をより効果的に解釈できるようになり、一部のアプリケーションでは、ユーザーにとって何が関連性があるか、あるいはユーザーが次に何をしようとしているかをより深く理解するのに役立つ。

Tobii Blog - Traffic rendering

アイトラッキングとAIが連携する2つの方法

アイトラッキングとAIの関係は、一方向だけでなく多方面にわたって成り立っています。

アイトラッキングは、AIにより多くの文脈情報を提供できる

一部のアプリケーションでは、アイトラッキングがAIシステムへのもう一つのリアルタイム入力手段となります。

誰かがどこに注意を向けているかを知ることは、曖昧さを減らすのに役立ち、その環境のどの部分が現在重要であるかについての情報を提供してくれます。

これは、AIが人間とやり取りをしたり、状況の変化に対応したり、複数のシグナルを同時に解釈したりする必要がある場合に役立ちます。

AIはアイトラッキングデータの解析に役立つ

他のアプリケーションでは、AIが分析対象とするのはアイトラッキングデータそのものです。

眼球運動からは、複雑で連続的なデータが生成されます。機械学習モデルを用いれば、手作業では検出が困難な大規模なデータセット全体のパターンを特定することができます。

これにより、アイトラッキングデータを、人々がどのように読み、学び、タスクを遂行し、製品と関わり、あるいはさまざまな環境に反応するかについての知見に変えることができます。

これら2つのアプローチにより、幅広い応用が可能になります。

スマートグラスに搭載された小型カメラは、何がユーザーの注意を引くのかを理解するのに役立ちます。

スマートグラスとAIアシスタント

スマートグラスは、人間の置かれた状況がいかに重要かを如実に示している。

カメラは、装着者の視野内に何があるかを識別することができます。アイトラッキングを利用すれば、その時点で装着者の注意が向いている部分に関する情報を追加することができます。

音声やその他の文脈情報と組み合わせることで、注意情報は、AIアシスタントがユーザーからの明示的な入力が少なくてもリクエストを解釈するのに役立ちます。

例えば、視線の動きを分析することで、その人がどの製品について知りたいのか、どのテキストを翻訳したいのか、あるいはどのオブジェクトがコマンドに関連しているのかを明らかにするのに役立つ可能性があります。

アイトラッキングだけでは、状況の全容を把握することはできません。これは、AIシステムが状況を理解する上で役立つ、もう一つの手がかりとなるものです。

XRと空間コンピューティング

アイトラッキングはすでに バーチャルリアリティや複合現実で広く利用されています。

視線に基づく操作に対応しており、 中心視領域レンダリング、トレーニング、評価、およびユーザー行動の分析に対応しています。

AIと組み合わせることで、視線データは、没入型環境内でユーザーが何をしているかに応じて適応するシステムの実現に寄与することができます。

あるアプリケーションでは、手元の動きや発話、その他の行動と併せて視線情報を活用し、ユーザーがタスクをどのように進めているかを把握することがある。トレーニングシステムでは、視線の注目パターンを、初心者と熟練者の習熟度を判別し、スキル習得の過程における進捗を測定するための複数の指標の一つとして活用できる。

こうした状況において、アイトラッキングは、デジタル環境におけるユーザーの行動をより包括的に把握するのに役立ちます。

AI and eye tracking

ロボティクスと人と機械の協働

対象: ロボットや知能を持つ機械が 人間と協働する場合、人間の注意を理解することも、不可欠な文脈を提供するものです。

人間同士の協力関係 は、多くの場合、明示的には語られることのない合図に依存している。私たちは、相手がどこを見ているか、何に手を伸ばそうとしているか、あるいは何に注意を向けているかに気づくのだ。

ロボットは、本来、こうした手がかりを捉えることができません。

アイトラッキングは視覚的注意に関する情報を提供し、コンピュータビジョンやその他のセンサーと組み合わせることで、システムが、どの物体や領域が現在関連性があるか、また、人間がタスクを実行する際にどのような意図を持っているかを理解するのに役立つ可能性があります。

これにより、 人と機械の間の 、すべての動作を明示的なコマンドで開始する必要も、すべての操作を厳密にスクリプト化する必要もありません。

視線追跡データのAI分析

アイトラッキングとAIにとって、最も重要な機会のいくつかは アイトラッキングとAI にとっての最も重要な活用機会のいくつかは、デバイスの操作とはほとんど関係がありません。

その代わりに、AIを活用すれば、アイトラッキングデータから有意義なパターンを抽出することができます。

Tobii社のアイトラッカーを使用して、学生の視線移動を分析するLexplore。
Tobii社のアイトラッカーを使用して、学生の視線移動を分析するLexplore。

教育

眼球運動からは、その人がどのように文章を読み、処理しているかについて、詳細な情報を得ることができます。

機械学習は、こうした眼球運動を分析して大規模なデータセット全体にわたるパターンを発見することができ、開発者が読解力の評価や、より個別化された学習支援のためのツールを開発する一助となります。

Tobiiのお客様 Lexploreは、例えば、 Tobii Pro Fusion/フュージョン アイトラッカー と機械学習を組み合わせて、生徒が読書中の眼球運動を分析し、そのパターンを読解力に関する情報に変換しています。

医療と研究

眼球運動には、神経学的および認知的プロセスに関連する情報が含まれていることがある。

2025年の系統的レビュー( 『Alzheimer’s & Dementia: Diagnosis, Assessment & Disease Monitoring』 に掲載された2025年のシステマティックレビューでは、アルツハイマー病、軽度認知障害、および関連する認知症を対象にアイトラッキングを用いた71件の研究が検討された。対象となった研究のうち6件は、アイトラッキングの測定結果を用いて、患者群と健常対照群を区別する機械学習モデルを開発していた。これらのモデルは、視覚探索、自由視、サッカード課題などのタスクから得られた特徴量に基づいていた。

こうしたアプリケーションでは、AIは一瞥から相手の意図を推測するために使用されるわけではありません。その代わりに、機械学習を用いて、手動での分析だけでは検出が難しいような、複雑な視線追跡データに潜むパターンを特定します。

データ品質が重要な理由

AIモデルは、受け取る情報の質に左右されます。

「When」 アイトラッキングデータが がそうした入力要素の一つとなる場合、測定の精度も重要になります。

正確で信頼性の高い視線データは、パターンの特定、行動の比較、そして人の行動に応じて反応する必要があるシステムの構築において、より強固な基盤となります。

データが収集される状況も重要である。

眼球運動は、課題、環境、個人、使用している機器などの要因によって左右されます。同じような視線行動であっても、教室、走行中の車両、仮想訓練環境、あるいは臨床評価の場面では、それぞれ異なる意味を持つ可能性があります。

だからこそ、アイトラッキングは、単独で解釈されるのではなく、状況に対するより広範な理解の一部として捉えられたときに、その真価を発揮するのです。

AI and eye tracking

中心にいる人物を理解する

AIがより多くのデバイス、製品、サービスに組み込まれるにつれ、人々が周囲の世界とどのように関わっているかを理解することが、ますます重要になっていくでしょう。

アイトラッキングは、人間の注意を定量的に測定可能にすることで、そうした視点をもたらすことができます。これにより、その瞬間の文脈を把握できるだけでなく、大規模なデータセット全体にわたるパターンを明らかにし、AIシステムやそれを開発する人々に、そうでなければ把握することが困難な情報へのアクセスを提供します。

こうした追加の文脈情報を活用することで、人々が周囲の世界をどのように認識し、注意を向け、関わり合っているかをより的確に反映したAIシステムを構築することが可能になります。

アイトラッキングについてもっと詳しく知りたいですか?

アイトラッキングを活用して、調査、製品、または研修をどのように改善できるかについては、当社の営業担当までお問い合わせください。

アイトラッキングとAIについてさらに学ぶ

 アイトラッキングとAI
company

アイトラッキングとAI

アイトラッキングは、人が「何に注意を向け、何を意図しているのか」を明らかにします。視線を通じて得られるこれらの人に関する理解は、AIにとって欠かせない情報です。アイトラッキングとAIを組み合わせることで、AIはまず人の状態や意図を理解できるようになります。その結果、AIは現実世界の状況をより正確に捉え、適切な判断や支援を行うことが可能になります。

ニュースレターを購読する

ニュースレターを購読する

ニュースレターに登録すると、Tobii'の最新ブログ記事や洞察を受信トレイにお届けします。実世界での行動、注目、明日のテクノロジーを形成するイノベーションに焦点を当てた記事をご覧ください。