あなたが使用した唯一のコントローラーフリーのハンドトラッキングがQuest2である場合、あなたはそれについて最良の意見を持っていないかもしれません。

確かに、VRで実際の手を初めて見るのはクールです。 しかし、Questのメニューシステムをナビゲートするか、Hand Physics Labなどのアプリでオブジェクトを取得してみてください。そうすれば、追跡品質には多くの要望が残されていることにすぐに気付くでしょう。

CES 2022で、私はUltraleapの第2014世代テクノロジーを試しました。これは会社がGeminiと呼んでいます。 消費者向けヘッドセットのリリース前からVRをフォローしている場合は、Oculus Developer Kit2の前面に取り付けることができるデスクトップハンドトラッキングアクセサリをXNUMX年に発売したスタートアップであるLeapMotionに精通しているはずです。ほとんどのユーザーがモーションコントローラーにアクセスする前に、VRへのハンドトラッキング。

LeapMotionには 少数のデモアプリケーション、そしてそれはソーシャルプラットフォームAltSpaceVRでもサポートされていました。 しかし、2016年にHTC Vive＆Oculus Touchコントローラーが発売されたとき、それにもかかわらず、関連性が急速に薄れていきました。 「Orion」と呼ばれる主要なアルゴリズム品質の更新。 2019年までに、AltSpaceでさえLeap Motionのサポートを終了しました。開発者は実際に所有するハードウェアユーザーを優先し、Leap Motionは比較的安価（約80ドル）でしたが、入力アクセサリの古典的な鶏が先か卵が先かという問題に直面していました。

LeapMotionは2019年に買収されました 英国を拠点とするハプティックテクノロジー企業UltraHapticsによって、合併してUltraLeapになりました。 一年後、 Facebookは、ハンドトラッキングを追加したソフトウェアアップデートをOculusQuestに出荷しました。 Questのハンドトラッキングは、搭載されている灰色の魚眼カメラ（赤外線スペクトルでも見ることができます）を活用しています。 それは機能し、何百万人もの人々がそれを使用していますが、あなたの手が間違った角度にあるか、互いに近すぎると、すぐに壊れます。 Ultraleapを試してみると、ハンドトラッキングがどれだけ優れているかがわかりました。

VR品質のハンドトラッキングにはセンサーのオーバーラップが必要です。アルゴリズムは各カメラの視点を比較して、各手の相対位置を決定します。 Questのカメラは広い視野を持っていますが、ヘッドセットの端に配置されているため、手の追跡領域は比較的小さくなっています。 そのため、目の前の手でのみ適切に機能し、手をビューに戻すと、システムが追跡を再確立していることに気付くことができます。

Ultraleapの最新のGeminiハンドトラッキング技術はOrionの後継であり、Ultraleapはそれがゼロから書き直されたと主張しています。 2020年に発表されました Qualcommとの複数年契約でSnapdragonXR2チップ用に統合および最適化。 アルゴリズムの95％はXR2のDSP（デジタルシグナルプロセッサ）で実行され、実際のVRおよびARアプリケーション用にCPUを解放します。

ふたご座をアタッチメントとして試してみました バイブ フォーカス 3 バーチャルリアリティヘッドセットと、今後のLynx R1複合現実ヘッドセットの統合された側面として–両方のヘッドセットはXR2チップを使用します。 170台の赤外線魚眼カメラは側面ではなく正面を向いており、XNUMX度の視野でほぼ完全に重なります。 これは、どちらのヘッドセットのレンズ（および存在するほとんどすべてのヘッドセット）よりも幅が広いです。

その結果、モーションコントローラーを使用するときと同じように、腕を自然に伸ばすことができ、追跡範囲から外れることを心配する必要がなくなりました。

その前のLeapMotionのようなハードウェアには、より良い視界のためにあなたの手を照らすアクティブな赤外線エミッターもあります。 さらに、センサーは毎秒90フレームでサンプリングされます。 これらの仕様とGeminiアルゴリズムの組み合わせは、仮想の手が私自身の手と正確に一致し、知覚できる待ち時間がないように見えることを意味しました。 クエストのハンドトラッキングの遅れとグリッチはなくなりました–ジェミニは何世代も先を感じました。 指をかみ合わせることができました。 片方の手をほぼ完全に塞ぐことによってのみ、追跡は失敗し始めました。

そして、オクルージョンについて言えば、デモの最も印象的な側面のXNUMXつは、再取得時間でした。 片方の手をテーブルの下に通してわざと塞いだのですが、再び見えるようになるまでに、ほぼ瞬時に追跡が再開されました。

私は常に、コントローラーフリーのハンドトラッキングが主流のバーチャルリアリティで重要な役割を果たすと信じていました。 一部の人々は、触覚の欠如に基づいてこれに反対します。これは、私が実際に議論することのできない見解です。 しかし、他の人は、認識された精度の欠如を理由に懐疑的です。 Geminiは、それが実際にはQuestの追跡品質であり、テクノロジーの根本的な限界ではないことを証明しています。

Geminiは事前に統合されます LynxR1ヘッドセット、Kickstarterの支援者は約500ドルから。 簡単に言えば、その価格でこの品質を手作業で追跡したことはありません。 開発者がそれを使って何をするのか、そしてこの技術を活用する将来のデバイスのために、私は興奮しています。 メタにはやるべきことがいくつかあります。

ソース：https：//uploadvr.com/ces-ultraleap-gemini-hand-tracking/