和风网标志

Meta Research 使耳机和眼镜能够识别家具

日期:

Meta 最新的人工智能研究系统使耳机和眼镜了解您的房间布局和家具。

称为 场景脚本Meta 表示,该系统利用与大型语言模型 (LLM) 相同的底层技术,只不过它不是预测下一个语言片段,而是预测 3D 点云捕获中的建筑和家具元素,与耳机已捕获的同类类型相同,以实现独立位置跟踪。

输出是一系列原始 3D 形状,代表给定家具或元素的基本边界。

Meta 的 SceneScript 实际应用

Quest 3 能够生成房间的原始 3D 网格,并可以根据该 3D 网格推断墙壁、地板和天花板的位置。但耳机目前不知道该网格中的哪些形状代表更具体的元素,例如门、窗、桌子、椅子和沙发。 Quest 耳机确实允许用户根据需要手动将这些对象标记为简单的长方体,但由于这是可选的,因此艰巨的开发人员不能依赖用户这样做。

如果像 SceneScript 这样的技术被集成到 Quest 3 的混合现实场景设置中,开发人员就可以自动将虚拟内容放置在特定家具元素上或周围。他们可以用门户替换你的窗户,用虚拟座位替换你的椅子,或者将你的沙发改为沙袋位置。如今,通过要求用户手动标记家具,或者有时使用解释场景网格的手动算法,这些事情都可以实现,但 SceneScript 可以使其无缝且自动化。

Meta 的 SceneScript 实际应用

像 SceneScript 这样的技术也可能在未来耳机和人工智能助手中具有巨大的潜力。 最终的 AR 眼镜。 Meta 给出了诸如“这张桌子适合我的卧室吗?”之类的问题的例子。或“需要多少罐油漆才能粉刷这个房间?”,以及诸如“将 [AR/MR 应用程序] 放在大桌子上”之类的命令。

目前,Meta 将 SceneScript 描述为纯粹的研究,而不是近期的产品功能更新。虽然这项技术最终可能会出现在 Quest 3 中,但没有迹象表明这种情况会很快发生。

现货图片

最新情报

现货图片