XR 개발자 포커스 - Tobii Ocumen, VR 게임, 인터랙션 디자인

이번 XR 개발자 포커스 에디션에 오신 것을 환영합니다! 지난 업데이트 이후 시간이 많이 지났지만 시선추적이 새로운 사용 영역에 어떻게 적용되고 새로운 산업에서 혁신을 불러일으키는지 지켜보는 것은 언제나 흥미진진한 일입니다. 유니티의 메일링 리스트에 가입하여 토비 시선추적을 활용한 개발에 대한 관련 뉴스, 인사이트 등을 가장 먼저 받아보세요.

하이라이트:

• Tobii Ocumen 성공 사례 및 AWE 강연

• 시선추적 기능을 갖춘 VR 게임

• 시선 기반 인터랙션을 위한 디자인

Tobii Ocumen트를 통한 혁신 지원

2년 전 출시 이후 Tobii Ocumen 은 다양한 산업 분야에서 기존 접근 방식을 파괴하고 효율성을 개선하는 많은 혁신에 힘을 실어주었습니다. VR에서 사용자 행동을 관찰하는 고급 도구로서 새로운 데이터에 액세스하고 인간 행동에 대한 세분화된 인사이트를 얻을 수 있도록 지원합니다. 개발자는 이 프레임워크를 사용하여 생체 인식을 기록, 구성 및 분석하고 건강 평가, 치료 및 훈련과 같은 영역에서 과학 수준의 VR 제품을 빠르게 구축하고 개발할 수 있습니다.

Gaize 는 약물 중독 운전자와 근로자 문제를 해결하기 위해 노력하는 소프트웨어 회사입니다. 가이즈의 CEO인 켄 피츨러(Ken Fitchler)가 AWE USA 2023 무대에서 인간의 상태를 이해하고 획기적인 솔루션을 개발하기 위한 VR과 시선추적의 융합 가능성을 모색하는 시간을 가졌습니다.

토비의 아만다 벤틀리와 로버트 말름스트룀이 Tobii Ocumen을 활용한 헬스케어, 교육 및 기타 산업 분야의 더 많은 성공 사례를 AWE 강연에서 소개했습니다.

Tobii Ocumen이 사용 사례에 도움이 될 것 같다면, 다음을 확인하세요. 제품 페이지 와 개발자 사이트 에서 자세한 정보를 확인하세요. 또한 무료 평가판을 통해 Tobii Ocumen이 귀사의 솔루션을 어떻게 강화할 수 있는지 확인해 보시기 바랍니다.

시선추적을 활용한 VR 게임

올해에는 다음과 같은 분야에서 시선추적을 활용하는 사례가 증가하는 추세를 보였습니다. VR 게임 VR 헤드셋의 컴퓨팅 성능을 최적화하고 더욱 자연스러운 상호작용을 구현하기 위해 시선추적을 활용하는 추세를 보았습니다.

토비 시선추적을 통한 동적 포비티드 렌더링 을 가능하게 했습니다. 실제 세계에서 우리의 눈과 뇌가 작동하는 방식과 유사하게, XR 디바이스의 컴퓨팅 성능은 우리의 시선이 집중되는 곳에만 집중할 수 있습니다. 그러면 절약된 시간을 게임과 같은 까다로운 콘텐츠를 실행하는 데 필수적인 높은 프레임 속도 유지와 같은 다른 중요한 작업에 사용할 수 있습니다. 디스플레이가 8K, 16K 등으로 발전함에 따라 이러한 절감 효과는 향후 XR 디바이스에서 기하급수적으로 증가할 것입니다.

"PS VR2의 포비에이티드 렌더링은 동일한 지각 품질을 구현하면서 GPU 사용량을 크게 줄일 수 있으며( – ), 시선추적 기술과 결합하면 성능이 더욱 향상됩니다... 또한 포비에이티드 렌더링과 시선추적을 결합하면 최대 3.6배 더 빨라지는 것을 확인했습니다."

-- Unity

시각의 힘과 시각적 신호에 대한 직관적인 이해를 활용하여 XR 기기는 가상 환경과 자연스럽고 몰입감 있는 상호작용을 구현할 수 있습니다. 더 좋은 점은 사용자가 새로운 행동 패턴을 학습할 필요 없이 이를 달성할 수 있다는 것입니다.

다음은 미디어의 리뷰 중 일부입니다:

"아날로그 휠로 스와이프하는 대신 옵션을 보고 얼굴 버튼을 누르기만 하면 캐릭터와 함께 대화 상자를 선택할 수 있습니다. 너무 매끄러워서 가끔은 제가 하고 있다는 사실을 잊을 뻔했어요 — 다시는 돌아가고 싶지 않아요."

-- The Verge

"그리고 Horizon과 같은 게임에서는 Call of the Mountain과 같은 게임에서는 시선 추적을 사용하여 메뉴를 탐색할 수 있습니다. 그리고 금방 머리 움직임 추적 시선 추적 포인터보다 훨씬 더 선호한다는 것을 알게 되었습니다... 눈을 사용하여 커서를 움직이는 것이 훨씬 더 쉽고 직관적이며 자연스럽다는 것을 알게 되었습니다."

- 아담 새비지의 테스트.

"... 찰나의 시선이 정말 그 자리에 있는 것처럼, 캐릭터의 눈빛을 받는 것처럼 느껴져서 그 순간에 빠져들 수밖에 없었습니다... 한동안 VR에서 느껴보지 못한 몰입감이었습니다."

- WIRED

개발자가 시선추적을 더 잘 활용할 수 있도록 토비는 GDC 2023에서 최첨단 시선추적 및 머리 움직임 추적을 사용하여 차세대 게임에서 몰입감의 한계를 뛰어넘는 방법에 대한 강연을 진행했습니다. 이 강연에서는 PC 및 XR 기기용 게임에서 시선추적 기술과 그 활용 사례에 대해 자세히 살펴볼 수 있습니다. 또한 개발자가 이 기술을 더 효과적으로 도입하여 게임의 몰입도를 높일 수 있도록 디자인 함정을 피하는 팁과 요령도 제공합니다.

시선 기반 인터랙션을 위한 디자인

최적화된 사용자 인터랙션과 경험을 제공하는 데 시선추적을 활용하는 이러한 추세는 게임뿐만 아니라 최근 애플의 비전 프로가 출시되면서 더 넓은 사용 영역으로 확산되고 있습니다. 시선추적은 다시 한번 XR의 필수 기술로서 검증되고 있습니다.

이러한 트렌드를 따라잡고 시선 기반 인터랙션을 디자인하는 데 관심이 있으시다면 데브존에서 VR의 시선추적 설계에 사용되는 기본 구성 요소에 대한 정보와 시선 기반 사용 사례를 설계할 때 고려해야 할 사항에 대한 팁과 요령을 확인할 수 있습니다.

또한 Unity 가 XRI2.3에 시선추적 지원을 추가했습니다.토비는 개념과 연구를 지원해 왔으며, 개발자를 위한 다음 단계의 지원에 기여하게 되어 자랑스럽게 생각합니다.

자료

마지막으로 여러분이 흥미를 가질 만한 몇 가지 자료를 소개해 드리고자 합니다.

포비티드 렌더링은 가상 현실을 경험하는 방식을 혁신하고 있는 렌더링 기법입니다. 사용자가 보고 있는 영역에서 최고 품질의 이미지만 렌더링하기 때문에 VR 헤드셋을 실행하는 데 필요한 처리 능력을 크게 줄일 수 있어 더 부드러운 성능, 고해상도 디스플레이 또는 더 긴 배터리 수명 등 다양한 성능 이점을 제공합니다.
자세한 내용은 포비티드 렌더링에 대한 블로그 아티클을 읽어보세요..

시선추적 연구를 진행하고, 데이터를 해석하고, 연구 결과에 대한 결론을 도출하는 경우, 제 동료인 Ieva Miseviciute의 최근 학습 아티클을 참고하시기 바랍니다. 안구 운동의 유형 이 매우 유용합니다.

월터 그린리프 박사는 스탠포드 가상 인간 상호작용 연구소의 의료 AR/VR 전문가로, 최근 VR, ML, 바이오센싱의 융합을 통한 헬스케어 혁신에 대해 영감을 주는 강연을 진행했습니다: 가상현실, 머신러닝, 바이오센싱 - 헬스케어 혁신을 위한 융합. 이 강연에서는 이러한 중요한 기술의 세부적인 동향에 대해 논의할 뿐만 아니라 이러한 기술의 융합으로 인해 저렴하고 확장 가능하며 더욱 효과적인 헬스케어가 실현될 미래를 전망했습니다.

행복한 개발과 다음 업데이트까지!