Một phát hiện về phần sụn cho thấy Meta đang trên đường đưa 'Codec Avatars' quang học của mình vào tai nghe Quest.

Codec Avatars là dự án nghiên cứu & phát triển lâu dài của Meta nhằm cách mạng hóa giao tiếp từ xa bằng cách tạo ra các hình đại diện quang học thực sự thuyết phục được điều khiển trong thời gian thực bằng tai nghe có cảm biến theo dõi khuôn mặt và cuối cùng là cả kính. Meta lần đầu tiết lộ sự tồn tại của dự án trong 2019, và đã thể hiện nhiều cập nhật độ trung thực trong những năm kể từ đó cũng như một phiên bản toàn thân.

Mặc dù Codec Avatars luôn được mô tả là nằm trong lĩnh vực nghiên cứu, nhưng một phát hiện mới cho thấy nó hiện có thể đang trên đường trở thành một tính năng trong tai nghe Quest.

Người đam mê VR Luna đã tìm thấy các tài liệu tham khảo về Codec Avatars bằng cách dịch ngược phiên bản 62 của phần mềm cơ sở Meta Quest, hiện có sẵn cho những người thử nghiệm trên Kênh thử nghiệm công khai.

Các tính năng Quest sắp tới đã được phát hiện theo cách này nhiều lần trong quá khứ. Nó cho chúng ta biết rằng Meta đang nỗ lực tích hợp một tính năng trên tai nghe Quest. Tuy nhiên, nó không cho chúng ta biết tính năng này còn bao xa nữa hoặc liệu nó có thực sự được xuất xưởng hay không. Ví dụ, Cảm giác không gian xuất hiện vài tháng sau khi được phát hiện trong phần sụn, trong khi nhiệm vụ chuyên nghiệp mất hơn một năm. Và các tài liệu tham khảo về tích hợp Discord và Dự án tuyết lở Tính năng phát trực tuyến PC VR trên nền tảng đám mây đã được phát hiện từ nhiều năm nay nhưng cả hai đều chưa xuất xưởng.

Vào tháng 3 năm ngoái Meta CTO Andrew Bosworth nói công ty đang "đạt được tiến bộ" trong việc vận chuyển Codec Avatars nhưng cảnh báo "chúng ta vẫn còn nhiều năm nữa mới có".

Cũng không rõ liệu tính năng này đang được phát triển cho tai nghe Quest hiện tại hay Quest Pro 2 trong tương lai.

Vào tháng 3 năm ngoái, một cuộc họp về lộ trình phần cứng Meta Quest đã bị rò rỉ cho The Verge. Cùng với việc tiết lộ thông tin chi tiết về Quest 3 và chiếc tai nghe rẻ hơn sắp ra mắt được đồn đại có tên là Quest XNUMX Lite, lộ trình cũng đề cập tai nghe Quest Pro mới “lối thoát trong tương lai” sẽ bao gồm Codec Avatars.

Nhưng có thể Meta có ý định đưa Codec Avatars vào Quest Pro hiện tại, hoặc thậm chí là Quest 2 và Quest 3.

Vào năm 2021, các nhà nghiên cứu của Meta đã chứng minh một phương pháp hiệu quả hơn đáng kể giải mã Codec Avatars. Trong Nhiệm vụ 2, phương pháp mới có thể hiển thị một Hình đại diện Codec trong một cảnh trống ở tốc độ tối đa 72FPS, ba Hình đại diện Codec ở tốc độ khoảng 63FPS hoặc năm Hình đại diện Codec ở tốc độ khoảng 43FPS.

Nhưng làm thế nào những hình đại diện này có thể được điều khiển trong Nhiệm vụ 2 và Nhiệm vụ 3, vốn thiếu khả năng theo dõi khuôn mặt và mắt? Các nhà nghiên cứu Meta cũng đã trình diễn một phiên bản Codec Avatars không yêu cầu theo dõi khuôn mặtvà gần đây thậm chí còn có một phiên bản không yêu cầu bất kỳ sự theo dõi nào cả. Thay vào đó, âm thanh từ micrô được đưa vào mạng lưới thần kinh để ước tính tư thế khuôn mặt phù hợp với mẫu giọng nói hiện tại.

Tuy nhiên, hoàn toàn có khả năng Meta sẽ muốn dự trữ các Avatar Codec cho Quest Pro 2 trong tương lai đủ mạnh để hỗ trợ các Avatar Codec trong Phòng làm việc Horizon các cuộc họp và thúc đẩy chúng bằng tính năng theo dõi khuôn mặt thực.

Bất kể tính năng Codec Avatars vận chuyển dành cho tai nghe Quest cụ thể nào, chất lượng gần như chắc chắn sẽ không giống với các bản demo ấn tượng nhất của Meta, chẳng hạn như cuộc phỏng vấn của Lex Fridman với Mark Zuckerberg. Những bản demo đó và cuộc phỏng vấn đó sử dụng Codec Avatars được tạo bằng giàn ghi hình chuyên dụng với hơn 100 máy ảnh.

Các nhà nghiên cứu meta đã và đang làm việc để thay thế quá trình này bằng cách quét điện thoại thông minh, cần thiết để thực sự vận chuyển các Avatar Codec trên quy mô lớn, nhưng điều này mang lại một kết quả chất lượng thấp hơn. Quest Pro 2 có thể bao gồm màn hình phía trước và cảm biến độ sâu để thiết lập hình đại diện như Apple Vision Pro sử dụng cho Personas của mình, nhưng điều này vẫn không thể sánh được với thiết bị chụp ảnh chuyên dụng.

Tuy nhiên, bất kỳ phiên bản nào của Codec Avatars đều phải là một cải tiến đáng kể so với các avatar hiện tại của Meta, vốn có phong cách nghệ thuật hoạt hình cơ bản không thể khác xa chủ nghĩa quang học. Chúng tôi sẽ theo dõi chặt chẽ Meta trong những tháng tới để biết thêm bất kỳ gợi ý nào về Codec Avatars đang trên đường sản xuất.

Ứng dụng sát thủ của VR có thể là hình đại diện Codec toàn thân

Bản demo cuối cùng trong chuyến thăm kéo dài một ngày tới các văn phòng nghiên cứu của Meta ở bang Washington có thể coi là đáng nhớ nhất — khả năng ngoại cảm thực sự. Hiện thực hóa khả năng ngoại cảm thực sự trong phần cứng của người tiêu dùng có thể là một trong những ý tưởng khó chuẩn bị nhất cho người tiêu dùng. Nó cũng có thể là chìa khóa để mở khóa kẻ sát nhân VR

• Phân phối nội dung và PR được hỗ trợ bởi SEO. Được khuếch đại ngay hôm nay.
• PlatoData.Network Vertical Generative Ai. Trao quyền cho chính mình. Truy cập Tại đây.
• PlatoAiStream. Thông minh Web3. Kiến thức khuếch đại. Truy cập Tại đây.
• Trung tâmESG. Than đá, công nghệ sạch, Năng lượng, Môi trường Hệ mặt trời, Quản lý chất thải. Truy cập Tại đây.
• PlatoSức khỏe. Tình báo thử nghiệm lâm sàng và công nghệ sinh học. Truy cập Tại đây.
• nguồn: https://www.uploadvr.com/meta-codec-avatars-might-be-coming-to-quest/