ICUC

2021.06Auejin Ham, Eunhwa Song, Seunghwan Kim

논문슬라이드

무엇
증강현실 안경을 쓴 두 사람이 같은 공간에서 서로 어디를 보는지 알 수 있게 한 시스템이다.
멀리 있는 것을 가리켜 설명하기에는 말과 손짓이 부족하고, 손에 든 기기를 보는 순간 현장에서 눈을 떼게 된다.
어떻게
HoloLens 2로 각자의 눈과 머리 방향을 재어 두 사람의 관심 영역이 겹치는 순간을 찾고, 그 대상에 사각 테두리를 양쪽 안경에 함께 띄운다. Unity(C#) 위에서 Azure Spatial Anchors로 좌표계를 공유하고 Photon Unity Networking으로 상태를 복제했다.
새로움
시선 표시를 늘 띄우는 대신 두 사람의 관심이 겹칠 때만 띄워, 알림 자체가 합의의 신호가 되게 했다.

초록

같은 공간에 함께 있는 AR 환경에서 거리 기반 상호작용에 관한 새로운 주의 단서(attention cueing) 기법을 활용해 효과적인 실시간 상호작용을 제공하는 시스템을 제안한다. 멀리 있는 특정 대상에 대한 자신의 관심을 설명하고 공유하는 것은 같은 공간에 있는 환경에서 가장 흔한 상호작용 중 하나다. 한편 기존 방법(말로 하는 소통, 가리키는 제스처 등)은 효율과 정보 대역폭이 제한적이어서, 네이버나 구글이 제공하는 것과 같은 소셜 네트워크와 온라인 지도의 형태로 위치와 맥락 정보를 제공하는 서비스가 많이 개발됐다. 그러나 물리적 표면에서 손에 든 디지털 기기로 주의가 옮겨가는 것은 본질적으로 정보 접근 비용(Information Access Cost, IAC)을 발생시켜 정보 획득 과정의 효율을 떨어뜨린다. 나아가 개인화된 휴대 기기를 통한 협업 상호작용은, 사용자가 실세계 대상에 대한 각자의 관심을 근처의 다른 사람에게 알려야 한다는 점에서, 가상 공간과 물리 세계의 간극 때문에 기술적으로 제약이 있다. 지금까지 많은 연구가 협업 환경의 상호작용 성능을 높이기 위해 시선 시각화를 활용해 왔다. 또한 최근 연구들은 선택된 대상의 정보를 증강하는 것뿐 아니라 시선 단서의 시각화에서도 맥락 인지를 고려하는 것이 중요하다는 점을 인정하기 시작했다. 반면 시선 단서로부터 효율적으로 이득을 얻는 상호작용 기법은 아직 깊이 연구되지 않았다. 그래서 이 프로젝트는 각 사용자의 눈과 머리 위치를 기반으로 HoloLens 2에 증강되는 공간 정보의 새로움을 탐구했다. 두 사용자가 공통의 관심 영역에 도달하면 대상 위에 사각 테두리 형태의 알림이 HoloLens 2에 투사된다.