Meta's nieuwste AI-onderzoekssysteem zorgt ervoor dat headsets en brillen de indeling en het meubilair van uw kamer begrijpen.

Riep ScèneScriptMeta zegt dat het systeem dezelfde onderliggende techniek gebruikt als grote taalmodellen (LLM's), behalve dat het in plaats van het volgende taalfragment te voorspellen architecturale en meubelelementen voorspelt binnen een 3D-puntenwolk-opname van dezelfde soort die headsets al vastleggen om stand-alone positionele tracking mogelijk te maken .

De output is een reeks primitieve 3D-vormen die de basisgrenzen van het gegeven meubilair of element vertegenwoordigen.

Quest 3 kan een ruwe 3D-mesh van uw kamer genereren en kan uit deze 3D-mesh de posities van uw muren, vloer en plafond afleiden. Maar de headset weet momenteel niet welke vormen binnen dit gaas specifiekere elementen vertegenwoordigen, zoals deuren, ramen, tafels, stoelen en banken. Met Quest-headsets kunnen gebruikers deze objecten handmatig markeren als eenvoudige rechthoekige kubussen als ze dat willen, maar aangezien dit optioneel en lastig is, kunnen ontwikkelaars er niet op vertrouwen dat gebruikers dit hebben gedaan.

Als een technologie als SceneScript zou worden geïntegreerd in de mixed reality-scèneopstelling van Quest 3, zouden ontwikkelaars automatisch virtuele inhoud op of rond specifieke meubelelementen kunnen plaatsen. Ze kunnen alleen uw ramen vervangen door portalen, of uw stoel door een virtuele stoel, of uw bank in een zandzak veranderen. Deze dingen zijn tegenwoordig mogelijk door de gebruiker te vragen het meubilair handmatig te markeren, of soms met handmatige algoritmen die het scènenetwerk interpreteren, maar SceneScript zou het naadloos en automatisch kunnen maken.

Technologie zoals SceneScript zou ook een enorm potentieel kunnen hebben voor AI-assistenten in toekomstige headsets en zijn uiteindelijke AR-bril. Meta geeft het voorbeeld van vragen als “Past dit bureau in mijn slaapkamer?” of “Hoeveel potten verf zijn er nodig om deze kamer te schilderen?”, maar ook opdrachten als “Plaats de [AR/MR-app] op de grote tafel”.

Voorlopig beschrijft Meta SceneScript echter puur als onderzoek, en niet als een update van productfuncties op de korte termijn. Hoewel deze technologie uiteindelijk naar Quest 3 kan komen, zijn er geen aanwijzingen dat dit binnenkort zal gebeuren.

• Door SEO aangedreven content en PR-distributie. Word vandaag nog versterkt.
• PlatoData.Network Verticale generatieve AI. Versterk jezelf. Toegang hier.
• PlatoAiStream. Web3-intelligentie. Kennis versterkt. Toegang hier.
• PlatoESG. carbon, CleanTech, Energie, Milieu, Zonne, Afvalbeheer. Toegang hier.
• Plato Gezondheid. Intelligentie op het gebied van biotech en klinische proeven. Toegang hier.
• Bron: https://www.uploadvr.com/meta-scenescript-research/