컨트롤러가 필요 없는 핸드 트래킹이 Quest 2뿐이라면 가장 좋은 평가를 받지 못할 수 있습니다.

물론 VR에서 실제 손을 처음 보는 것은 멋진 일입니다. 그러나 Quest의 메뉴 시스템을 탐색하거나 Hand Physics Lab과 같은 앱에서 개체를 잡으려고 하면 추적 품질이 많이 부족하다는 것을 곧 깨닫게 될 것입니다.

CES 2022에서 저는 Ultraleap의 2014세대 기술을 사용해 보았습니다. 회사에서는 이를 Gemini라고 부릅니다. 소비자용 헤드셋 출시 이전부터 VR을 즐겨왔다면 2년 Oculus 개발자 키트 XNUMX 전면에 장착할 수 있는 데스크톱 손 추적 액세서리를 출시한 스타트업인 Leap Motion에 익숙할 것입니다. 대부분의 사용자가 모션 컨트롤러에 액세스하기도 전에 VR에 대한 손 추적.

립 모션은 소규모 데모 애플리케이션, 소셜 플랫폼 AltSpaceVR에서도 지원되었습니다. 그러나 HTC Vive 및 Oculus Touch 컨트롤러가 2016년에 출시되었을 때 'Orion'이라는 주요 알고리즘 품질 업데이트. 2019년까지 AltSpace도 Leap Motion에 대한 지원을 중단했습니다. 개발자는 사용자가 실제로 소유한 하드웨어를 우선시했으며, Leap Motion이 비교적 저렴(약 $80)에도 불구하고 입력 액세서리의 고전적인 닭고기 및 계란 문제에 여전히 직면했습니다.

2019년 립모션 인수 영국에 기반을 둔 햅틱 기술 회사인 UltraHaptics가 합병하여 UltraLeap이 되었습니다. XNUMX년 후, 페이스북, 손 추적 기능 추가한 오큘러스 퀘스트 소프트웨어 업데이트 출시. Quest의 손 추적은 내장된 회색 어안 카메라(적외선 스펙트럼에서도 볼 수 있음)를 활용합니다. 그것은 작동하고 수백만 명의 사람들이 그것을 사용했지만 손이 잘못된 각도로 있거나 너무 가까이 있으면 빨리 고장납니다. Ultraleap을 사용해 보니 손 추적이 얼마나 더 나은지 알 수 있었습니다.

VR 품질의 손 추적에는 센서 중첩이 필요합니다. 알고리즘은 각 카메라의 원근을 비교하여 각 손의 상대적 위치를 결정합니다. Quest의 카메라는 시야가 넓지만 헤드셋 가장자리에 위치하여 바깥쪽을 향하고 있기 때문에 손 추적 영역이 상대적으로 작습니다. 이것이 바로 앞에 있는 손으로만 제대로 작동하는 이유이며, 손을 다시 시야로 가져오면 시스템이 추적을 다시 설정하는 것을 볼 수 있는 이유입니다.

Ultraleap의 최신 Gemini 손 추적 기술은 Orion의 후속 제품이며 Ultraleap은 처음부터 다시 작성했다고 주장합니다. 2020년에 발표되었습니다. Qualcomm과 Snapdragon XR2 칩을 통합하고 최적화하는 다년 계약. 알고리즘의 95%는 XR2의 DSP(디지털 신호 프로세서)에서 실행되어 실제 VR 및 AR 애플리케이션을 위한 CPU 여유 공간을 확보합니다.

나는 쌍둥이 자리를 첨부 파일로 사용해 보았습니다. 바이브 포커스 3 가상 현실 헤드셋과 곧 출시될 Lynx R1 혼합 현실 헤드셋의 통합 측면으로서 두 헤드셋 모두 XR2 칩을 사용합니다. 두 대의 적외선 어안 카메라는 측면이 아닌 정면을 향하고 있어 170도 시야에서 거의 전체가 겹칩니다. 이는 헤드셋의 렌즈(및 현존하는 거의 모든 헤드셋)보다 넓습니다.

그 결과 모션 컨트롤러를 사용할 때처럼 자연스럽게 팔을 뻗을 수 있었고 더 이상 추적 범위를 벗어날 염려가 없었습니다.

이전의 Leap Motion과 같은 하드웨어에는 더 나은 시야를 위해 손을 비추는 활성 적외선 방출기가 있습니다. 또한 센서는 초당 90프레임으로 샘플링됩니다. 이러한 사양과 Gemini 알고리즘의 조합은 가상 손이 지각할 수 있는 지연 없이 내 손과 정확하게 일치하는 것처럼 보였습니다. Quest의 핸드 트래킹의 지연과 결함이 사라졌습니다. Gemini는 세대를 앞서고 있다고 느꼈습니다. 손가락을 맞대기도 했다. 한 손을 거의 완전히 가려야만 추적이 실패하기 시작했습니다.

오클루전(Occlusion)에 대해 말하자면, 데모에서 가장 인상적인 부분 중 하나는 재획득 시간이었습니다. 나는 의도적으로 한쪽 손을 탁자 아래로 넘겨서 막았지만, 그것이 다시 보일 즈음에는 추적이 거의 즉시 재개되었다.

저는 컨트롤러가 필요 없는 손 추적이 주류 가상 현실에서 중요한 역할을 할 것이라고 항상 믿어왔습니다. 일부 사람들은 햅틱이 부족하다는 이유로 이에 대해 반대합니다. 그러나 다른 사람들은 인식된 정확성 부족에 대해 회의적입니다. Gemini는 이것이 기술의 근본적인 한계가 아니라 Quest의 추적 품질일 뿐임을 증명합니다.

Gemini는 사전 통합됩니다. Lynx R1 헤드셋, Kickstarter 후원자의 경우 약 $500부터 시작합니다. 간단히 말해서, 이 가격에 이 품질을 손으로 추적한 적이 없습니다. 개발자들이 이 기술로 무엇을 할 것인지, 그리고 이 기술을 활용하는 미래의 장치에 대해 알게 되어 기쁩니다. 메타가 따라잡아야 할 부분이 있습니다.

출처: https://uploadvr.com/ces-ultraleap-gemini-hand-tracking/