Tobii Ocumen makes it easier for us to run our software and do our analysis. Everything is being filtered for us. All the high-frequency gaze data are captured, processed, and filtered — a step we hadn't previously been able to utilize. When the data gets to us, it's ready for our implementation. It's a tremendous time-saver, and it puts the raw data into a consumable format.Scott Anderson, chief clinical officer, NeuroSync
私はTobii Ocumenのプロダクトマネージャーとして、XRとアイトラッキングの融合を最前列で見てきました。2020年に先進的なVRツールキットTobii Ocumenを発表して以来、私たちはデータのロバスト性を確保するためにコードのリファクタリングに時間を費やし、様々な専門分野の開発者たちが私たちのアイトラッキング技術や先進的なバイオメトリクスを活用したVRソリューションを商品化するのを支援してきました。
この記事では、Tobii Ocumenを使用して開発された最も革新的な商用ソリューションの中から5つをご紹介します。記事の一番下には、このツールキットの詳細について記載するとともに、あなたの研究/アプリケーション/ソリューション開発に役立ちそうであれば、無料トライアルをリクエストするためのリンクもあります。是非お役立てください!
#1 Concussion assessment — NeuroSync
Tobii Ocumenを最初に使ってくれた顧客の1つがNeuroSync社(旧SyncThink社)です。最高臨床責任者であるScott Anderson氏が2021年のインタビューで下記のように指摘しています。
VRの主な利点の1つは携帯性です。NeuroSync社は、臨床医の外傷性脳損傷(TBI)診断をサポートするEYE-SYNC®というVRソリューションを開発しました。VRを使用することでサッカー場やホッケーリンクのサイドラインに直接ソリューションを持ち込みながらも、スポーツ競技の現場という喧噪の中でも外部からの影響を遮断し、理想的な状態で診断できるというわけです。
Anderson氏は、正確な眼球運動の測定と、Tobii Ocumenが提供する高レベルのフィルタを使用することで、アイトラッキングの生データを信頼性の高いバイオマーカーに変換する作業が容易になったことを強調しています。
#2 Cognitive performance — REACT Neuro and Aperion Life
世界的な高齢化に伴い、アルツハイマー病、パーキンソン病、ALSなどの神経変性疾患に対する治療や、生活の質確保に向けた認知能力の重要性が注目を集めています。REACT Neuro社はケンブリッジを拠点とするプラットフォーム開発企業で、既存の認知テスト手法をVRに移行することに取り組んでいます。シリコンバレーのスタートアップApeiron Life社は健康的なライフスタイルが認知能力に及ぼす影響についての調査で、REACT Neuro社のクラシックな紙面テストのVRシミュレーション版を使用しました。
このアプリケーションはTobii Ocumenの高度なバイオメトリクスを活用し、手動では判別しようのないサッカード(Saccade)や視線停留(Fixation)を明らかにします。このような眼球運動が認知機能と相関性が高く、上記のような疾患の診断の参考データとなり得ることは多くの学術研究論文が示唆しています。
試験終了後、両者はアイトラッキング、モーショントラッキングに代表される高度なセンサー技術によって生成されるディープ・メトリクスの可能性に大いに沸き、ウェルビーイングへの意識の高まりというトレンドによってこれらの手法が確実に主流になっていくと話しています。
Extracting the high-resolution data associated with both eye and hand movements is simply not possible with traditional manual observation. The new technology provides potential to see how the brain works in unique and hopefully meaningful ways.Dr. David Martin, chief scientist, Apeiron Life
こちらのブログから全文を読むことができます:Cognitive performance through decades of life.
#3 VR-based training — Cineon Training
今後10年間で、訓練されたパイロットが世界的に不足するといわれており、一説には最大8万人とも言われています。不足の原因は様々ですが、コロナ禍におけるレイオフや早期退職、軍用パイロットの減少、パンデミック後の旅行業界の急回復、建設コスト高騰によるシミュレーション施設の不足などが挙げられます。
英国を拠点とするCineon Training社は、コミュニケーション能力向上、技能習得の加速を実現するVRアプリケーション、TACETを開発しました。これは基本的な視線データとTobii Ocumenが提供するAdvanced Signalを使用し、シミュレーター教育の効率向上に一役買っています
TACETはTobiiアイトラッキングを搭載したVRヘッドセットPico Neo 3 Pro EyeをMicrosoft Azure上のクラウドアプリケーションに接続し、Tobii Ocumenが出力するデータの録画のアップロード/再生を可能にしています。この画像ではエキスパート(緑の線)と初心者(白の線)がそれぞれどのようにタスクを遂行するかを視覚的に示しています。
主な利点の1つは、アイトラッキングが技能習得の効率を飛躍的に上げる点にあります。アイトラッキング(視線データ)は心の窓のような役割を果たし、タスク中の被験者の見たもの・考えたことを可視化します。自分が何を見ているか、自分の目がどのように動いているかを、エキスパートの動きと一目で比較できるという機能によって、意識的にコントロールすることは難しい“認知“について振り返り、学習のスピードを向上させることができます。また、エキスパートにとっても同じで、個々のスキルを可視化し更に洗練することが可能になります。
Eye tracking and VR are the primary research tools our lab uses to develop innovative tools for training in aviation and other high-risk industries. Tobii Ocumen allows us to develop our unique tools, much more effectively, spending more time on our core business, and less on programming.Dr. Sam Vine, co-founder of Cineon Training and associate professor at University of Exeter
#4 Digital transformation in MedTech — Olleyes
人間のインサイトを提供するデジタルツールとして、アイトラッキングは人力での観察をデジタルに置き換えることに役立ちます。先述の通り、NeuroSyncの脳震盪アセスメントでは、VRはソリューションに機動力をもたらしより柔軟なサービス開発を実現しています。
Olleyes社はPico Neo 3 Pro Eye VRヘッドセット上でTobii Ocumenを使用し、例えば緑内障患者の網膜感度を分析するなど、視野に関しての包括的なアセスメントを提供しています。彼らは、迅速に、かつ人が横になっていても、座っていても受けられるテストを提供することでソリューションに柔軟性をもたらし、クリニックが1日あたりに診断できる人の数を増やしています。Olleyes社は、MedTech領域における他の企業と同様に在宅診療へのシフトを可能にすることで、更に便利なものにしようとしています。
Olleyes社とのコラボレーションについてもっと知りになりたい方は、同僚のAmanda BentleyとOlleyes社CEOのAlberto Gonzalez氏によるVRARAヘルスケアフォーラムでの講演をご覧ください: Build more accessible and effective vision care.
Our VisuALL Virtual Reality Platform (VRP) provides automatic, objective, and standardized visual function tests. Our partnership with Tobii allows us to increase the accuracy of our technology even more. Tobii Ocumen has helped us develop and deploy our product offerings and is a step forward in automating the assessment of visual function.Alberto Gonzalez, CEO, Olleyes
#5 Pilot training – VTR
ボーイング737やエアバスA32のような新しいタイプの航空機を操縦できるようになるには、パイロットはライセンスを取得する必要があります。すべての計器の位置と機能を学ぶために、コックピットを模したモックアップが使われます。ただし、訓練者にとってこれは、「張り子の虎」のようなものです。この「虎」は、高度なタッチスクリーンを設置可能ですが、ほとんどが高コストで3D空間としてのリアルさに欠けています。このような状況での技能習得、つまりコックピット内のすべてのランプ、ボタン、スイッチ、ゲージの配置と意味を学習するには最低でも通常2~3週間かかり、パイロットにとっても理想的とは言えません。例えばボーイング737のマニュアルは、約2,000ページもあるのです。
VTR社はこの訓練設備としての妥当性の無さを解消するため、コックピット環境をリアルに、正確に再現することで、より確実な技能習得を可能にするVRシミュレーションを開発しました。米国最大級の航空会社の一つ、JetBlue社と協力し、投資対効果を裏付ける実データを収集しています。
VTR社をより深く知るために、私の同僚であるJohan BouvinとVTRの共同創設者のひとりであるRick Parker氏によるAWEでの講演の視聴をお勧めします。
About Tobii Ocumenについて
これら5つの事例はすべて商用化に成功しています。理由としては、VRの統制された環境や、現実に近いリアルさ、機動性を利用し、低コストなソリューションを生み出しているからです。そして、全てTobii Ocumenを用いて開発されています。
では、このようなアプリケーションの開発を可能にするTobii Ocumenは何をもたらすのでしょうか?
Advanced Signalとフィルタ
Tobii Ocumenは以下のような高度なアイトラッキングシグナルを提供します:
視線ベクトル(左/右それぞれ)
瞳孔径(左/右それぞれ)
高精度なシステム/デバイスのタイムスタンプ
アイトラッキングハードウェア、ファームウェア、ランタイムソフトウェアのバージョンなどのメタデータ
また、Ocumenの視線フィルターライブラリーは、学術研究にて既に検証された停留、サッカード、スムース・パシュートなどの眼球運動を検出するためのフィルタコンポーネントを提供し、お客様に好評頂いています。このフィルタは、アイトラッキングHWによって取得されたデータを、一般的な使いやすい形式のバイオマーカーの要素に変換し、出力します。
キャリブレーションとポジショニング
Tobii Ocumenが高品質なデータを提供し、映像を正しく表示するためには、VRヘッドセットがユーザーの頭部・目に合わせて正しく装着され、アイトラッキングが個人に合わせてキャリブレーションされる必要があります。キャリブレーションとポジショニング調整のプロセスをお客様のアプリケーションに直接組み込むことができる機能を有しています。
レコーディングと再生
Tobii Ocumenは開発を容易にするため、3Dオブジェクトの動きやユーザービュービデオなどのコンテキストデータと、高度なアイトラッキングやコントローライベントからのセンサーデータを1つのフォーマットに統合しています。
Unityプロジェクトに素早く統合するための、一般的なリサーチパラダイム用のテンプレートを用意しています。また、録画/再生をサポートするために、Tobii Ocumen Studioを開発しました。(下記のビデオ参照)
データ統合
直近のTobii Ocumenの開発では、データ構造に力を入れ、スピードとファイルサイズを最適化し、オープンなI/Oインターフェースを持つ柔軟な製品アーキテクチャを作成しました。本製品はデータ変換をサポートしており、あらゆるデバイスで収集されたデータを、プログラミング言語を問わず簡単にインポートすることができます。
また、当社が学術研究のコミュニティと深い関係にあることは言及しておくべきでしょう。規制当局による認証が必要な商用ソリューションでは科学的根拠と検証データがどれだけ重要であるかを痛感しています。私たちの検証には、人口カバー率、正確性、精密性、可用性などが含まれます。
AWE USA 2023 - Healthcare & Wellness: Disrupting Healthcare, Training, and More
お役立ちリンク
さらなるインスピレーションと技術的な詳細については
開発者ゾーンをご覧ください。
製品の詳細については、Tobii Ocumenの製品ページをご覧ください。
Tobii Ocumenの無料トライアル
個人ではなく、適格な企業間取引(B2B)のご依頼には、14日間の無料トライアルを提供しています。
関連コンテンツ
XR developer focus — Tobii Ocumen, VR games, and Interaction design
In this blog post, we will discuss Tobii Ocumen success stories, VR games featuring eye tracking as well as design for gaze-based interactions.
Tobii Ocumen — transforming innovation into commercial products
In this post, we talk about VR evolution. How hardware, sensor technology, and data capabilities have now reached an inflection point, delivering today’s VR platforms that are powerful, sensor-driven, and priced for scalability.
XR developer focus — PS VR2, games, hardware improvement, and healthcare
In this XR developer focus post, Johan Bouvin summarizes the impact of our eye tracking in upcoming VR headsets.