home

Tobii Ocumen이 구현한 상업용 VR 혁신의 5가지 주요 사례

  • 블로그
  • 작성자 Robert Malmström

저는 Tobii Ocumen의 제품 관리자로 일하면서 XR과 시선추적의 융합을 가장 가까이에서 지켜볼 수 있었고, 그 결과 탄생한 놀라운 솔루션들을 가까이서 접할 수 있는 기회를 가졌습니다. 2020년부터
Tobii Ocumen — 고급 VR 툴킷( — )을 출시한 이후, 우리는 견고성을 보장하기 위해 코드를 리팩토링하고 다양한 전문 분야 및 분야의 개발자들과 협력하여 제품에 포함된 고급 생체인식 및 개발 및 배포용 툴과 시선추적 기술을 활용하는 VR 솔루션을 상용화할 수 있도록 지원했습니다.

이 포스팅에서는 Tobii Ocumen( — )의 혁신가들이 해결한 문제와 극복한 장애물을 알아볼 수 있기를 바라며, 가장 혁신적인 상용 솔루션이라고 생각되는 다섯 가지를 공유하고자 합니다. 게시물 하단에서 툴킷, 필터의 작동 방식, 개방형 아키텍처를 보장하기 위해 데이터 구조를 개발한 방법에 대한 자세한 내용을 확인할 수 있습니다. 또한 Tobii Ocumen이 연구, 응용 분야 또는 솔루션에 도움이 된다면 무료 평가판을 요청할 수 있는 링크도 있습니다. 즐겨 보세요!

#뇌진탕 평가 1위 — NeuroSync

Tobii Ocumen을 처음 사용한 고객 중 하나는 뉴로싱크 (이전의 SyncThink)였습니다. 2021년 인터뷰에서 Scott Anderson(최고 임상 책임자)이 지적한 것처럼
확장성의 열쇠 찾기에서 언급했듯이 VR의 주요 장점 중 하나는 이동성입니다. NeuroSync는 임상의가 외상성 뇌 손상(TBI)을 평가하는 데 도움이 되는 솔루션 — EYE-SYNC® — 을 개발했습니다. VR은 축구장이나 하키 링크의 사이드 라인에 직접 솔루션을 제공할 뿐만 아니라, 폐쇄적인 환경으로 인해 라이브 스포츠 이벤트에서 격렬할 수 있는 외부 영향을 무시할 수 있도록 돕는 데 이상적입니다. 결정적으로 앤더슨은 정확하고 체계적인 시선 움직임 측정과 Tobii Ocumen에 포함된 고급 필터를 사용하여 원시 시선추적 데이터를 신뢰할 수 있는 바이오마커로 변환하는 작업을 용이하게 한 방법에 대해 언급합니다.

Tobii Ocumen makes it easier for us to run our software and do our analysis. Everything is being filtered for us. All the high-frequency gaze data are captured, processed, and filtered — a step we hadn't previously been able to utilize. When the data gets to us, it's ready for our implementation. It's a tremendous time-saver, and it puts the raw data into a consumable format.
Scott Anderson, chief clinical officer, NeuroSync

#2 인지 성능 — REACT Neuro 및 Aperion Life

전 세계 인구의 고령화로 인해 삶의 질을 보장하고 알츠하이머, 루게릭병, 파킨슨병과 같은 신경 퇴행성 질환을 치료하기 위해 인지 능력의 중요성이 주목받고 있습니다. 리액트 뉴로 는 캠브리지에 기반을 둔 플랫폼 개발업체로, 기존의 인지 테스트를 VR로 전환하는 연구를 진행하고 있습니다. 건강한 라이프스타일이 인지 능력에 미치는 영향을 알아보기 위한 실험을 진행 중입니다, 에이피론 라이프 (실리콘밸리 스타트업)는 기존의 종이 기반 트레일 테스트에 REACT Neuro의 VR 시뮬레이션을 사용했습니다.

이 응용 분야는 Tobii Ocumen의 고급 생체 인식을 활용하여 수동으로 관찰할 수 없는 희생과 고정을 밝혀냅니다. 데이터의 견고성을 통해 시간 경과에 따른 성과를 추적할 수 있습니다.

시험이 끝난 후 두 회사는 시선추적, 동작 추적, 폐활량계, 뇌파 및 열화상 센서와 같은 첨단 센서 기술이 생성하는 심층 지표의 잠재력과 웰빙이라는 거시적 트렌드에 따라 이러한 첨단 기술이 어떻게 주류로 흘러들어갈지에 대해 열광하고 있습니다.

이 고전적인 트레일 테스트는 사람의 시선 패턴과 각 하위 과제에 얼마나 오래 머무르는지를 보여주는데, 원(가장 오른쪽 이미지)이 클수록 다음 숫자에 대해 더 오래 생각해야 한다는 것을 알 수 있습니다. 수동 테스트에서는 완료까지 걸린 시간만 측정할 수 있습니다.
이 고전적인 트레일 테스트는 사람의 시선 패턴과 각 하위 과제에 얼마나 오래 머무르는지를 보여주는데, 원(가장 오른쪽 이미지)이 클수록 다음 숫자에 대해 더 오래 생각해야 한다는 것을 알 수 있습니다. 수동 테스트에서는 완료까지 걸린 시간만 측정할 수 있습니다.
Extracting the high-resolution data associated with both eye and hand movements is simply not possible with traditional manual observation. The new technology provides potential to see how the brain works in unique and hopefully meaningful ways.
Dr. David Martin, chief scientist, Apeiron Life

전체 이야기는 이 블로그 게시물에서 확인할 수 있습니다: 수십 년 동안의 인지 성능.

#3 VR 기반 교육 — Cineon 교육

수치는 다양하지만 일부 소식통에 따르면 향후 10년간 전 세계적으로 최대 8만 명의 훈련된 조종사가 부족할 것으로 예상하고 있습니다. 이러한 부족 현상은 코로나 기간 중 해고와 조기 퇴직, 군 조종사 감소(민간 항공의 가용성 감소), 코로나 이후 여행 산업의 회복, 구축 비용이 많이 들고 시간당 요금이 치솟는 시뮬레이션 시설의 만석 등 다양한 요인으로 인해 발생하고 있습니다.

시네온 트레이닝은 커뮤니케이션 역량을 키우고 기술 습득을 가속화하기 위해 VR 기반 응용 분야(TACET)를 개발했습니다. 이 앱은 시선추적과 Tobii Ocumen의 고급 신호를 사용하여 시뮬레이터에서 보내는 시간의 효율성을 개선합니다.

시네온 몰입형 교육 이미지 제공
시네온 몰입형 교육 이미지 제공

TACET은 Microsoft Azure 클라우드 솔루션에 연결된 Tobii Ocumen( — )의 시선추적 기능이 탑재된 언테더링 VR 헤드셋 Pico Neo 3 Pro Eye( — )에서 Tobii Ocumen을 사용하여 녹화물을 업로드하고 검토합니다. 이 이미지는 전문가가 작업을 수행하는 방식(녹색 선)을 초보자(흰색 선)와 비교하여 보여줍니다.

주요 시사점 중 하나는 시선추적이 학습된 기술의 견고성에 미치는 영향입니다. 다른 파트너사에서도 이와 같은 이야기를 들었습니다. 시선추적은 마음을 들여다볼 수 있는 창을 제공합니다. 시선추적을 통해 감정과 느낌을 평가하고 학습 속도를 높일 수 있습니다. 새로운 기술을 습득할 때 시선이 어떻게 움직이는지(무엇에 집중하는지) 확인하고 전문가의 작업 방식과 비교할 수 있으면 인지 문제를 해결하는 데 도움이 됩니다. 또한 이미 잘하는 사람은 자신의 솔루션을 개선할 수 있습니다.

Eye tracking and VR are the primary research tools our lab uses to develop innovative tools for training in aviation and other high-risk industries. Tobii Ocumen allows us to develop our unique tools, much more effectively, spending more time on our core business, and less on programming.
Dr. Sam Vine, co-founder of Cineon Training and associate professor at University of Exeter

#4 의료 기술의 디지털 혁신 — Olleyes

시선추적은 사람에 대한 인사이트를 제공하는 디지털 도구로서 수작업 관찰에 기반한 기존 치료를 디지털 영역으로 전환하는 데 도움이 됩니다. 앞서 언급했듯이 NeuroSync의 뇌진탕 평가에서 VR은 이동성이라는 보너스를 제공하여 매우 유연한 솔루션으로 이어지기도 합니다.

Olleyes 는 녹내장 환자의 망막 민감도를 분석하는 등 시야에 대한 종합적인 평가를 제공하기 위해 Pico Neo 3 Pro Eye VR 헤드셋에 Tobii Ocumen을 사용했습니다. 이들은 누워 있거나 앉아서 몇 시간이 아닌 몇 분 만에 빠르게 검사할 수 있는 일련의 눈 검사를 개발하여( — ) 솔루션의 유연성과 클리닉에서 매일 평가할 수 있는 인원을 늘렸습니다. 다른 많은 의료 기술 기업과 마찬가지로 Olleyes는 솔루션을 더욱 편리하게 만들기 위해 노력하고 있습니다.시프트 투 더 홈.

Olleyes와의 협업에 대해 더 자세히 알고 싶으시다면, 제 동료인 아만다 벤틀리와 Olleyes의 CEO 알베르토 곤잘레스가 함께한 VRARA 헬스케어 포럼 강연을 추천합니다. 더 접근하기 쉽고 효과적인 시력 관리 구축.

Our VisuALL Virtual Reality Platform (VRP) provides automatic, objective, and standardized visual function tests. Our partnership with Tobii allows us to increase the accuracy of our technology even more. Tobii Ocumen has helped us develop and deploy our product offerings and is a step forward in automating the assessment of visual function.
Alberto Gonzalez, CEO, Olleyes

#5 파일럿 교육 – VTR

보잉 737이나 에어버스 A320과 같은 새로운 기종을 조종하려면 조종사는 형식 등급 인증서(면허증)가 필요합니다. 모든 계기의 위치와 기능을 익히기 위해 일반적으로 "종이 호랑이"( — )라고 알려진 조종석 모형을 사용합니다. 타이거는 고급 터치스크린 설정이 가능하지만 비용이 많이 들고 3D 공간에 대한 사실적인 감각을 제공하지 못하는 경향이 있습니다. 일반적으로 새로운 기종과 조종석의 모든 조명, 버튼, 스위치, 게이지의 의미를 익히는 데 2~3주 정도 걸리는 파일럿에게는 적합하지 않은 상황입니다. 예를 들어 보잉 737의 매뉴얼은 약 2,000페이지에 달합니다.

종이 호랑이의 열악한 생태적 유효성을 극복하기 위해, VTR 은 강력한 기술 습득을 보장하기 위해 조종석 환경을 정확하게 복제하는 VR 시뮬레이션을 개발했습니다. 결정적으로 미국 최대 항공사 중 하나인 젯블루( — — )와 협력하여 ROI를 뒷받침하는 사용 사례 데이터를 확보했습니다.

VTR에 대해 자세히 알아보려면 제 동료인 요한 부빈과 VTR의 공동 창립자 중 한 명인 릭 파커가 진행하는 이 AWE 강연을 추천합니다.XR과 시선추적으로 파괴적인 파일럿 훈련 구축하기.

Tobii Ocumen 소개

이 5가지 매우 혁신적인 사용 사례는 VR의 폐쇄성, 이동성, 매체가 제공하는 현실감을 활용하여 비용 효율적인 솔루션을 제공하기 때문에 상업적으로 실행 가능합니다. 그리고 모두 Tobii Ocumen을 사용하여 개발되었습니다.

그렇다면 이러한 응용 분야를 개발할 수 있는 Tobii Ocumen의 장점은 무엇일까요?

고급 신호 및 필터

Tobii Ocumen은 다음과 같은 고급 시선추적 신호를 제공합니다:

  • 시선 벡터(왼쪽 눈과 오른쪽 눈 분리).

  • 동공 직경(왼쪽 눈과 오른쪽 눈 분리).

  • 고정밀 시스템 및 디바이스 타임스탬프.

  • 시선추적 하드웨어, 펌웨어, 런타임 소프트웨어 버전 등의 메타데이터.

고객들이 매우 만족스러워하는 필터 라이브러리는 연구 기반의 사전 검증된 필터 구성 요소를 제공하여 고정, 희생, 부드러운 추적과 같은 시선 움직임을 감지합니다. 이러한 필터는 시선추적 하드웨어로 캡처한 데이터를 표준 바이오마커의 빌딩 블록으로 변환합니다.

보정 및 포지셔닝

Tobii Ocumen이 양질의 데이터를 제공하고 이미지를 올바르게 표시하려면 VR 헤드셋이 사용자의 머리에 올바르게 장착되어야 하며, 시선추적 기능을 개인에 맞게 보정해야 합니다.

보정 및 위치 지정 프로세스를 간소화하기 위해 사용자가 애플리케이션을 종료하고 별도의 보정/위치 지정 프로세스를 시작한 다음 다시 시작하는 번거로운 단계를 거치지 않도록 애플리케이션에 직접 삽입할 수 있는 몇 가지 멋진 기능을 개발했습니다.

응용 분야에 임베딩하기 위한 시선추적 보정
응용 분야에 임베딩하기 위한 시선추적 보정
헤드셋 위치 설정을 위한 간단한 가이드
헤드셋 위치 설정을 위한 간단한 가이드

녹화 및 재생

개발을 용이하게 하기 위해 Tobii Ocumen은 3D 물체의 움직임과 사용자 뷰 비디오와 같은 컨텍스트 데이터와 고급 시선추적 및 컨트롤러 이벤트의 센서 데이터를 단일 형식으로 결합합니다.

유니티는 일반적인 연구 조사 패러다임을 위한 몇 가지 기성 레코더와 템플릿을 제공하여 Unity 프로젝트에 빠르게 통합할 수 있습니다. 또한 기록된 데이터(컨텍스트 및 센서)를 이해하기 쉬운 시각적 형식으로 표시하는 Tobii Ocumen 스튜디오(아래 동영상 참조)를 개발하여 재생할 수 있도록 했습니다.

Video thumbnail

데이터 통합 기능

최근 Tobii Ocumen을 개발하면서 데이터 구조에 많은 노력을 기울여 속도와 파일 크기를 최적화하고 개방형 I/O 인터페이스를 갖춘 유연한 제품 아키텍처를 만들었습니다. 이 제품은 데이터 변환을 지원하며, 선호하는 프로그래밍 언어에 관계없이 모든 기기나 컴퓨터에서 수집한 데이터를 쉽게 가져올 수 있습니다.

과학 연구 커뮤니티와의 깊은 관계는 언급할 가치가 있다고 생각합니다. 따라서 규제 인증이 필요한 상용 솔루션에서 과학적 수준의 검증 데이터의 필요성을 잘 알고 있습니다. 저희의 검증에는 모집단 범위, 정확도, 정밀도 및 추적성 성능이 포함됩니다.

AWE USA 2023 - 헬스케어 및 웰니스: 헬스케어, 교육 등의 혁신

AWE USA 2023 - 헬스케어 및 웰니스: 헬스케어, 교육 등의 혁신

유용한 링크

Tobii Ocumen 무료 평가판 요청하기

개인이 아닌 적격 B2B(기업 간 거래) 요청에 한해 14일 무료 체험판을 제공합니다.

    작성자

    • Robert Malmström

      Robert Malmström

      Product Manager Tobii Ocumen

      Hi, I am the product manager for Tobii Ocumen, which means I get to work closely with our development teams and customers to determine when and what features we should create or improve. It’s my job to ensure that our products are functional and intuitive without creating a burden for developers. I believe in the enjoyment factor. It should be fun and easy to make XR applications while getting the most out of a headset that includes our technology.

    Tobii Ocumen에 대해 계속 알아보기

    뉴스레터 구독

    뉴스레터 구독

    Tobii의 최신 블로그 게시물과 인사이트를 이메일로 받아보세요. 실제 행동, 주의력, 그리고 미래 기술을 만들어가는 혁신에 관한 기사를 확인하세요.