O mais recente sistema de pesquisa de IA da Meta faz com que fones de ouvido e óculos entendam o layout e os móveis da sua sala.
Chamado CenaScript, Meta diz que o sistema aproveita a mesma técnica subjacente dos grandes modelos de linguagem (LLMs), exceto que, em vez de prever o próximo fragmento de linguagem, ele prevê elementos arquitetônicos e de mobiliário dentro de uma captura de nuvem de pontos 3D do mesmo tipo que os fones de ouvido já capturam para permitir o rastreamento posicional independente .
A saída é uma série de formas 3D primitivas que representam os limites básicos de um determinado móvel ou elemento.
SceneScript da Meta em ação
O Quest 3 é capaz de gerar uma malha 3D bruta da sua sala e pode inferir as posições das paredes, piso e teto a partir dessa malha 3D. Mas atualmente o headset não sabe quais formas dentro dessa malha representam elementos mais específicos, como portas, janelas, mesas, cadeiras e sofás. Os fones de ouvido da Quest permitem que os usuários marquem manualmente esses objetos como cubóides retangulares simples, se quiserem, mas como isso é opcional e árduo, os desenvolvedores não podem confiar que os usuários o farão.
Se uma tecnologia como o SceneScript fosse integrada à configuração de cena de realidade mista do Quest 3, os desenvolvedores poderiam colocar automaticamente conteúdo virtual sobre ou ao redor de elementos específicos de mobiliário. Eles poderiam substituir apenas suas janelas por portais, ou sua cadeira por um assento virtual, ou mudar seu sofá para uma posição de saco de areia. Essas coisas são possíveis hoje em dia pedindo ao usuário que marque os móveis manualmente ou, às vezes, com algoritmos manuais que interpretam a malha da cena, mas o SceneScript pode torná-lo contínuo e automático.
SceneScript da Meta em ação
Tecnologia como SceneScript também pode ter um enorme potencial para assistentes de IA em futuros headsets e seus eventuais óculos AR. Meta dá o exemplo de perguntas como “Esta mesa caberá no meu quarto?” ou “Quantos potes de tinta seriam necessários para pintar esta sala?”, além de comandos como “Coloque o [aplicativo AR/MR] na mesa grande”.
Por enquanto, Meta está descrevendo o SceneScript puramente como pesquisa, não como uma atualização de recurso de produto de curto prazo. Embora esta tecnologia possa eventualmente chegar ao Quest 3, não há sugestão de que isso aconteça tão cedo.
- Conteúdo com tecnologia de SEO e distribuição de relações públicas. Seja amplificado hoje.
- PlatoData.Network Gerativa Vertical Ai. Capacite-se. Acesse aqui.
- PlatoAiStream. Inteligência Web3. Conhecimento Amplificado. Acesse aqui.
- PlatãoESG. Carbono Tecnologia Limpa, Energia, Ambiente, Solar, Gestão de resíduos. Acesse aqui.
- PlatoHealth. Inteligência em Biotecnologia e Ensaios Clínicos. Acesse aqui.
- Fonte: https://www.uploadvr.com/meta-scenescript-research/
