Logo Zephyrnet

Meta Research giúp tai nghe và kính nhận biết đồ nội thất

Ngày:

Hệ thống nghiên cứu AI mới nhất của Meta giúp tai nghe và kính hiểu được cách bố trí và nội thất trong phòng của bạn.

Được gọi là SceneScript, Meta cho biết hệ thống này tận dụng kỹ thuật cơ bản tương tự như các mô hình ngôn ngữ lớn (LLM), ngoại trừ thay vì dự đoán đoạn ngôn ngữ tiếp theo, nó dự đoán các thành phần kiến ​​trúc và nội thất trong bản chụp đám mây điểm 3D cùng loại mà tai nghe đã chụp để cho phép theo dõi vị trí độc lập .

Đầu ra là một loạt các hình dạng 3D nguyên thủy thể hiện các ranh giới cơ bản của đồ nội thất hoặc thành phần nhất định.

SceneScript của Meta đang hoạt động

Nhiệm vụ 3 có khả năng tạo lưới 3D thô trong phòng của bạn và có thể suy ra vị trí của tường, sàn và trần nhà từ lưới 3D này. Nhưng tai nghe hiện không biết hình dạng nào trong lưới này đại diện cho các yếu tố cụ thể hơn như cửa ra vào, cửa sổ, bàn, ghế và ghế sofa. Tai nghe Quest cho phép người dùng đánh dấu các vật thể này dưới dạng hình khối chữ nhật đơn giản theo cách thủ công nếu họ muốn, nhưng vì đây là tùy chọn và các nhà phát triển khó tính không thể tin tưởng vào việc người dùng đã làm như vậy.

Nếu một công nghệ như SceneScript được tích hợp vào thiết lập cảnh thực tế hỗn hợp của Quest 3, các nhà phát triển có thể tự động đặt nội dung ảo trên hoặc xung quanh các thành phần đồ nội thất cụ thể. Họ có thể chỉ thay thế cửa sổ của bạn bằng cổng hoặc ghế của bạn bằng ghế ảo hoặc thay đổi ghế sofa của bạn thành vị trí bao cát. Ngày nay, những điều này có thể thực hiện được bằng cách yêu cầu người dùng đánh dấu đồ nội thất theo cách thủ công hoặc đôi khi bằng các thuật toán thủ công diễn giải lưới cảnh, nhưng SceneScript có thể làm cho nó liền mạch và tự động.

SceneScript của Meta đang hoạt động

Công nghệ như SceneScript cũng có thể có tiềm năng to lớn cho trợ lý AI trong các tai nghe và tai nghe trong tương lai. kính AR cuối cùng của nó. Meta đưa ra ví dụ về những câu hỏi như “Cái bàn này có vừa với phòng ngủ của tôi không?” hoặc “Cần bao nhiêu chậu sơn để sơn căn phòng này?”, cũng như các lệnh như “Đặt [ứng dụng AR/MR] lên bàn lớn”.

Hiện tại, Meta đang mô tả SceneScript hoàn toàn là nghiên cứu chứ không phải là bản cập nhật tính năng sản phẩm trong thời gian ngắn. Mặc dù công nghệ này cuối cùng có thể xuất hiện trong Quest 3 nhưng không có dấu hiệu nào cho thấy điều đó sẽ sớm xảy ra.

tại chỗ_img

Tin tức mới nhất

tại chỗ_img