사용자 상호 작용
이번에는 사용자가 물리적 환경에서 디지털 엔티티와 상호 작용할 수 있는 최신 기술을 알아보겠습니다.
모바일 입력 기술
메타버스의 최종 단계는 물리적 세계와 디지털트윈을 상호 연결하기 때문에 물리적 세계의 모든 인간 사용자는 메타버스와 MR 모두에 위치한 아바타와 가상 객체를 물리적 환경에서 작업할 수 있습니다. 즉, 물리적 세계와 가상 세계 모두 지속적으로 서로 영향을 미칩니다. 사용자가 어디서나 디지털 실체와 상호작용할 수 있도록 해야 합니다. 그러나, 기존 메타버스의 대부분은 아바타의 신체 움직임을 정확하게 반영할 수 없는 키보드 및 마우스와의 사용자 상호작용만 허용합니다. 또한 이러한 부피가 큰 키보드와 마우스는 모바일 사용자 상호작용을 위해 설계되지 않았기 때문에 사용자가 앉은 자세를 유지할 수 밖에 없습니다.
비록 핸즈프리 상호 작용은 맨손 조작으로 인한 직관력을 특징으로 하고, 나아가 객체 포인팅 및 조작을 달성하지만, 대부분의 핸즈프리 상호 작용은 컴퓨터 비전(CV) 기술에 의존합니다. 따라서, 핸즈프리 상호작용의 정확하고 실시간 인식은 기술적으로 필수적이며, 심지어 가장 기본적인 공중 포인팅도 충분한 계산 자원이 필요합니다. 불충분한 계산 자원은 사용자 조치의 지연 시간을 초래하여 사용자 경험을 악화시킬 수 있습니다. CV 기반 상호 작용 기법 외에도, 연구 커뮤니티는 광학, IMU 주도, Pyroelectric 적외선, 전자기, 용량성 및 IMU 주도 사용자 상호 작용을 포함한 복잡한 사용자 상호 작용을 지원하기 위해 입력 양식을 크게 다양화했습니다. 이러한 대안적 양식은 사용자 활동을 포착할 수 있으므로 메타버스에서 디지털 엔티티와 상호 작용할 수 있습니다.
그럼, 모바일 입력 기법을 대체 입력 모드로 설명하기 위한 몇 가지 현존 방법에 대해 알아보겠습니다.
1) 신체 내 센서 부착
먼저 인간 사용자 자신이 신체 내 사용자 상호작용이라고 하는 가장 편리하고 즉시 사용할 수 있는 상호작용 표면이 될 수 있습니다. 예를 들어, ActiTouch 는 사용자의 팔뚝에 부착된 용량성 표면을 소유하고 있습니다. ActiTouch의 전극은 사용자의 신체를 넓은 입력 표면으로 전환하며, 이는 사용자가 메타버스의 다양한 디지털 엔터티에 걸쳐 다른 이해 관계자와 통신하기 위해 자신의 신체를 탭할 수 있음을 의미합니다. 또 다른 유사한 기술은 AR이 사용자의 팔에 중첩되면서 사용자가 아이콘, 메뉴, 기타 가상 객체와 상호 작용할 수 있는 입력 명령 집합을 강화했습니다. 또한, 이러한 신체 내 상호 작용은 소셜 터치를 원격으로 가능하게 하는 대인 상호 작용을 위한 솔루션으로 사용될 수 있습니다. 이러한 온바디 사용자 상호 작용은 인간 사용자와 아바타 간의 소통을 강화할 수 있습니다. 신체 내 상호 작용의 최신 기술은 손바닥 영역에서 손가락 끝까지 기기 크기가 감소하는 추세를 보여줍니다. 따라서 앞에서 언급한 손가락과 팔 사이의 상호 작용보다 사용자의 상호 작용이 더 눈에 띄지 않게 됩니다. 그럼에도 불구하고, 대체 입력 양식을 검색한다고 해서 CV 기반 기법이 적용되지 않는 것은 아닙니다. 대체 입력 모드와 CV 기반 기술을 함께 사용하면 시간에 민감하거나 복잡한 사용자 입력을 처리하는 직관성과 능력을 모두 유지할 수 있습니다. 예를 들어, CV 기반 솔루션은 IMU 센서를 보완하여 작동합니다. CV 기반 기술은 공중에서 사용자가 손으로 하는 가상 물체 사이의 상대적 위치를 결정하는 반면, IMU 센서는 가상 물체를 정교하고 정확하게 조작할 수 있습니다.
2) 디지털 섬유
센서를 우리 몸에 부착하는 대신, 다른 대안은 디지털 섬유로 여겨집니다. 디지털 직물은 일반적인 직물 내부에 새로운 소재와 전도성 실을 통합하여 2D 및 3D 사용자 인터페이스(UI)와의 사용자 상호작용을 지원합니다. 포켓과 같은 프로토타입을 조사합니다. 엄지와 ARCord는 우리의 옷을 MR. Pocket의 디지털 엔티티와의 사용자 인터페이스로 변환합니다. 엄지손가락은 앞바지 주머니에 있는 똑똑한 직물입니다. 사용자는 패브릭에 탭과 터치를 가하여 사용자 상호 작용을 수행할 수 있습니다. 예를 들어, MR의 3D 가상 객체로 포인팅 작업 시 커서를 배치할 수 있습니다. 또한 ARCord는 재킷에 부착된 코드 기반 섬유이며, 코드를 문질러 다양한 가상 환경에서 메뉴 선택 및 가상 객체에 대한 레이캐스팅을 수행할 수 있습니다. 놀랍게도, 기술 대기업들은 차세대 모바일 사용자 입력을 지원하기 위해 이 분야에 투자했습니다. 예를 들어, 구글은 저렴한 가격에 대규모로 스마트 직조 제작을 시도하는 Jacquard 프로젝트를 시작했습니다. 그 결과, 스마트 원단은 재킷, 바지 등 일상복과 융합되어 언제 어디서나 사용자 입력을 지원할 수 있습니다. 공간이 제한되어 모든 유형의 모바일 입력에 대해 논의할 수는 없지만, 연구계는 XR의 모바일 입력 및 대체 입력 모드에 대해 보다 자연스럽고 작고 미묘하고 눈에 띄지 않는 인터페이스를 찾고 있습니다.
댓글