Логотип Зефирнет

Мета-исследование заставляет гарнитуры и очки узнавать мебель

Дата:

Новейшая исследовательская система искусственного интеллекта Meta позволяет гарнитурам и очкам понимать планировку и мебель вашей комнаты.

называемый СценарийСценарийМета утверждает, что система использует тот же базовый метод, что и большие языковые модели (LLM), за исключением того, что вместо прогнозирования следующего языкового фрагмента она прогнозирует архитектурные и мебельные элементы в рамках трехмерного захвата облака точек того же типа, который уже захватывают гарнитуры, чтобы обеспечить автономное позиционное отслеживание. .

Результатом является серия примитивных 3D-форм, которые представляют основные границы данной мебели или элемента.

Meta SceneScript в действии

Quest 3 способен создавать необработанную 3D-сетку вашей комнаты и определять положение ваших стен, пола и потолка на основе этой 3D-сетки. Но в настоящее время гарнитура не знает, какие фигуры внутри этой сетки представляют более конкретные элементы, такие как двери, окна, столы, стулья и диваны. Гарнитуры Quest позволяют пользователям помечать эти объекты как простые прямоугольные кубоиды вручную, если они того захотят, но поскольку это необязательно и утомительно, разработчики не могут рассчитывать на то, что пользователи это сделают.

Если бы такая технология, как SceneScript, была интегрирована в настройку сцены смешанной реальности Quest 3, разработчики могли бы автоматически размещать виртуальный контент на определенных элементах мебели или вокруг них. Они могут заменить только ваши окна порталами, ваш стул виртуальным сиденьем или превратить ваш диван в мешки с песком. Сегодня это возможно, если попросить пользователя разметить мебель вручную или иногда с помощью ручных алгоритмов, интерпретирующих сетку сцены, но SceneScript может сделать это плавным и автоматическим.

Meta SceneScript в действии

Такие технологии, как SceneScript, также могут иметь огромный потенциал для использования ИИ-помощников в будущих гарнитурах и компьютерах. его возможные очки AR. Мета приводит пример таких вопросов, как «Поместится ли этот стол в моей спальне?» или «Сколько банок с краской потребуется, чтобы покрасить эту комнату?», а также такие команды, как «Поместите [приложение AR/MR] на большой стол».

Однако на данный момент Meta описывает SceneScript исключительно как исследование, а не как ближайшее обновление функций продукта. Хотя эта технология может в конечном итоге появиться в Quest 3, нет никаких предположений, что это произойдет в ближайшее время.

Spot_img

Последняя разведка

Spot_img