Jika satu-satunya pelacakan tangan bebas pengontrol yang Anda gunakan adalah Quest 2, Anda mungkin tidak memiliki pendapat terbaik tentangnya.
Tentu itu keren untuk melihat tangan Anda yang sebenarnya di VR untuk pertama kalinya. Tetapi cobalah untuk menavigasi sistem menu Quest atau ambil objek di aplikasi seperti Hand Physics Lab dan Anda akan segera menyadari bahwa kualitas pelacakan meninggalkan banyak hal yang diinginkan.
Di CES 2022 saya mencoba teknologi generasi kelima Ultraleap, yang oleh perusahaan disebut Gemini. Jika Anda telah mengikuti VR sejak sebelum rilis headset konsumen, Anda akan akrab dengan Leap Motion, sebuah startup yang meluncurkan aksesori pelacakan tangan desktop pada tahun 2014 yang dapat dipasang di bagian depan Oculus Developer Kit 2. Ini membawa pelacakan tangan ke VR bahkan sebelum sebagian besar pengguna memiliki akses ke pengontrol gerakan.
Leap Motion memiliki sejumlah kecil aplikasi demo, dan bahkan didukung di platform sosial AltSpaceVR. Tetapi ketika pengontrol HTC Vive & Oculus Touch diluncurkan pada tahun 2016, itu dengan cepat memudar dari relevansinya, meskipun pembaruan kualitas algoritme utama yang disebut 'Orion'. Pada tahun 2019 bahkan AltSpace menjatuhkan dukungan untuk Leap Motion – pengembang memprioritaskan untuk pengguna perangkat keras yang sebenarnya dimiliki, dan meskipun Leap Motion relatif murah (sekitar $80) masih menghadapi masalah ayam & telur klasik dari aksesori input.
Leap Motion diakuisisi pada 2019 oleh perusahaan teknologi haptic yang berbasis di Inggris, UltraHaptics, bergabung menjadi UltraLeap. Setahun kemudian, Facebook mengirimkan pembaruan perangkat lunak ke Oculus Quest dengan menambahkan pelacakan tangan. Pelacakan tangan Quest memanfaatkan kamera mata ikan abu-abu onboard (yang juga dapat dilihat dalam spektrum inframerah). Itu berhasil, dan jutaan orang telah menggunakannya, tetapi jika tangan Anda berada pada sudut yang salah atau terlalu berdekatan, tangan Anda akan cepat rusak. Mencoba Ultraleap menunjukkan kepada saya betapa jauh lebih baik pelacakan tangan.
Pelacakan tangan berkualitas VR membutuhkan sensor yang tumpang tindih – algoritme membandingkan perspektif setiap kamera untuk menentukan posisi relatif masing-masing tangan. Kamera Quest memiliki bidang pandang yang luas, tetapi karena diposisikan di tepi headset yang mengarah ke luar, area pelacakan tangan relatif kecil. Itulah mengapa ini hanya bekerja dengan baik dengan tangan Anda tepat di depan Anda, dan mengapa Anda dapat melihat sistem membangun kembali pelacakan saat Anda membawa tangan Anda kembali ke pandangan Anda.
Teknologi pelacakan tangan Gemini terbaru dari Ultraleap adalah penerus Orion, dan Ultraleap mengklaim bahwa itu ditulis ulang dari awal. Diumumkan pada tahun 2020 bersama perjanjian multi-tahun dengan Qualcomm yang mengintegrasikan dan mengoptimalkannya untuk chip Snapdragon XR2. 95% dari algoritma berjalan pada DSP (Digital Signal Processor) XR2, membebaskan CPU untuk aplikasi VR & AR yang sebenarnya.
Saya mencoba Gemini sebagai lampiran untuk Fokus Vive 3 headset realitas virtual dan sebagai aspek terintegrasi dari headset realitas campuran Lynx R1 yang akan datang – kedua headset menggunakan chip XR2. Kedua kamera mata ikan inframerah menghadap ke depan, bukan ke samping, memberikan tumpang tindih hampir total pada bidang pandang 170 derajat. Itu lebih lebar dari kedua lensa headset (dan hampir setiap headset yang ada).
Hasilnya adalah seperti saat menggunakan pengontrol gerakan, saya dapat meregangkan tangan secara alami dan tidak perlu lagi khawatir keluar dari jangkauan pelacakan.
Perangkat kerasnya, seperti Leap Motion sebelumnya, juga memiliki pemancar inframerah aktif untuk menerangi tangan Anda untuk tampilan yang lebih baik. Dan selanjutnya, sensor diambil sampelnya pada 90 frame per detik. Kombinasi spesifikasi ini dan algoritme Gemini berarti tangan virtual tampaknya cocok dengan milik saya secara tepat dan tanpa latensi yang terlihat. Lewatlah sudah lag dan glitching pelacakan tangan Quest - Gemini merasa generasi di depan. Aku bahkan bisa mengunci jariku. Hanya dengan menutup satu tangan hampir seluruhnya, pelacakan mulai gagal.
Dan berbicara tentang oklusi, salah satu aspek demo yang paling mengesankan adalah waktu akuisisi ulang. Saya sengaja menutup salah satu tangan saya dengan meletakkannya di bawah meja, tetapi pada saat itu terlihat lagi, pelacakan hampir segera dilanjutkan.
Saya selalu percaya pelacakan tangan tanpa pengontrol akan memainkan peran penting dalam realitas virtual arus utama. Beberapa orang keberatan dengan ini atas dasar kurangnya haptics, pandangan yang tidak dapat saya bantah. Tetapi yang lain skeptis dengan alasan kurangnya presisi. Gemini membuktikan bahwa itu benar-benar hanya kualitas pelacakan Quest, bukan batasan mendasar dari teknologi.
Gemini akan pra-integrasi di headset Lynx R1, yang dimulai dari sekitar $500 untuk pendukung Kickstarter. Sederhananya, tidak pernah ada pelacakan tangan kualitas ini pada harga itu. Saya senang melihat apa yang akan dilakukan pengembang dengannya, dan untuk perangkat masa depan yang memanfaatkan teknologi ini. Meta memiliki beberapa hal yang harus dilakukan.
Sumber: https://uploadvr.com/ces-ultraleap-gemini-hand-tracking/
