ゼファーネットのロゴ

メタはすぐにフォトリアルな「コーデックアバター」をクエストに導入しますか?

日付:

ファームウェアの調査結果は、Meta がフォトリアリスティックな「コーデック アバター」を Quest ヘッドセットに導入する準備を順調に進めていることを示唆しています。

Codec Avatars は、顔追跡センサーを備えたヘッドセット、そして最終的にはメガネによってリアルタイムで駆動される、真に説得力のある写真のようにリアルなアバターを実現することで、リモート コミュニケーションに革命を起こすことを目的とした、Meta の長期にわたる研究開発プロジェクトです。メタがプロジェクトの存在を初めて明らかにした in 2019と複数を披露しています。 忠実度の更新 それから数年もの間、 全身バージョン.

[埋め込まれたコンテンツ]

このインタビューでは、アバターがオンボードでデコードおよびレンダリングされていたのか、それとも PC がこの作業を行っていたのかは不明です。 USB-C ケーブルが両方のヘッドセットに接続されています。

コーデック アバターは常に研究の領域にあるものだと言われてきましたが、新しい発見は、それが Quest ヘッドセットの機能として登場する方向にかなり進んでいる可能性があることを示唆しています。

VR愛好家 ルナ Meta Quest ファームウェアのバージョン 62 を逆コンパイルすることで、コーデック アバターへの参照が見つかりました。このファームウェアは現在、パブリック テスト チャネルでテスターが利用できます。

今後の Quest 機能は、過去に何度もこの方法で発見されています。これは、Meta が Quest ヘッドセットに機能を統合することに取り組んでいることを示しています。ただし、その機能がどのくらい先になるのか、あるいは実際に出荷されるのかどうかはわかりません。例えば、 スペースセンス ファームウェアで発見されてから数か月後に到着しましたが、 クエストプロ 1年以上かかりました。また、Discord の統合と プロジェクトアバランチ クラウド PC VR ストリーミング機能は何年も前から発見されてきましたが、どちらも出荷されていません。

昨年3月、Meta CTOのアンドリュー・ボスワース氏 同社はコーデックアバターの出荷に関して「進歩」しているが、「まだ何年も先のことだ」と警告した。

Luna が Quest ファームウェアで見つけた文字列。

また、この機能が既存の Quest ヘッドセット用に開発されているのか、それとも将来の Quest Pro 2 用に開発されているのかも明らかではありません。

昨年 3 月、Meta Quest のハードウェア ロードマップ会議が The Verge にリークされました。 Quest 3 と、Quest XNUMX Lite と呼ばれると噂される今後の安価なヘッドセットの詳細を明らかにするだけでなく、ロードマップでは言及されています 新しいQuest Proヘッドセット コーデック アバターが含まれる「将来の方法」。

しかし、メタがコーデックアバターを既存のQuest Pro、あるいはQuest 2やQuest 3に導入するつもりである可能性はある。

Quest 2 スタンドアロンでデコードされるコーデック アバター。

2021 年、メタ研究者は、 大幅に効率的な方法 コーデック アバターのデコードの様子。 Quest 2 では、新しい方法により、空白のシーンに 72 つのコーデック アバターをフル 63FPS でレンダリングでき、43 つのコーデック アバターを約 XNUMXFPS で、または XNUMX つのコーデック アバターを約 XNUMXFPS でレンダリングできます。

しかし、顔追跡と視線追跡の両方がない Quest 2 と Quest 3 では、どうやってこれらのアバターを操作できるのでしょうか?メタ研究者は、コーデック アバターのバージョンも実証しました。 顔追跡は必要ありません、そして最近では、 追跡はまったく必要ありません。代わりに、マイクからの音声がニューラル ネットワークに供給され、現在の音声パターンで考えられる顔のポーズが推定されます。

それでも、メタがコーデック アバターをサポートするのに十分強力な将来の Quest Pro 2 のためにコーデック アバターを予約したいと考える可能性は十分にあります。 ホライゾンワークルーム 会議を開始し、実際の顔の追跡を使用して会議を推進します。

最高品質のコーデック アバターに使用される特殊なキャプチャ リグ。

出荷されるコーデック アバター機能がどの特定の Quest ヘッドセットを対象としているかに関係なく、品質はほぼ確実に Meta の最も印象的なデモと同じではありません。 レックス・フリッドマンのインタビュー マーク・ザッカーバーグと。これらのデモとインタビューでは、100 台以上のカメラを備えた特殊なキャプチャ リグを使用して生成されたコーデック アバターが使用されました。

[埋め込まれたコンテンツ]

メタ研究者はこのプロセスを置き換えるために取り組んでいます スマホスキャンで、コーデック アバターを実際に大規模に出荷するために必要ですが、これにより、 品質の低い結果。 Quest Pro 2 には、次のようなアバター設定用の前面ディスプレイと深度センサーが含まれる可能性があります。 Apple Vision Pro はペルソナに使用します, しかし、これでもまだ専用のキャプチャリグには適合しません。

それでも、コーデック アバターのどのバージョンも、フォトリアリズムから遠く離れていない基本的な漫画風のアート スタイルを持つ Meta の現在のアバターよりも劇的に改善されているはずです。コーデック アバターが製品化に向けて進んでいるというさらなるヒントがないか、今後数か月間メタに注目していきます。

VRのキラーアプリは全身コーデックのアバターかもしれない

ワシントン州にある Meta の研究オフィスを 1 日かけて訪問した最後のデモは、間違いなく最も記憶に残るものであり、真のテレプレゼンスでした。消費者向けハードウェアで真のテレプレゼンスを実現することは、消費者が準備するのが最も難しいアイデアの 1 つである可能性があります。それは VR のキラーを解き放つ鍵でもあるかもしれない

スポット画像

最新のインテリジェンス

スポット画像