Das neueste KI-Forschungssystem von Meta sorgt dafür, dass Headsets und Brillen Ihre Raumaufteilung und Möbel verstehen.

namens SceneScriptLaut Meta nutzt das System die gleiche zugrunde liegende Technik wie große Sprachmodelle (LLMs), außer dass es statt der Vorhersage des nächsten Sprachfragments Architektur- und Möbelelemente innerhalb einer 3D-Punktwolkenerfassung der gleichen Art vorhersagt, die Headsets bereits erfassen, um eine eigenständige Positionsverfolgung zu ermöglichen .

Die Ausgabe ist eine Reihe primitiver 3D-Formen, die die Grundgrenzen des gegebenen Möbels oder Elements darstellen.

Quest 3 ist in der Lage, ein rohes 3D-Netz Ihres Raums zu erstellen und aus diesem 3D-Netz die Positionen Ihrer Wände, Ihres Bodens und Ihrer Decke abzuleiten. Allerdings weiß das Headset derzeit nicht, welche Formen innerhalb dieses Netzes spezifischere Elemente wie Türen, Fenster, Tische, Stühle und Sofas darstellen. Mit Quest-Headsets können Benutzer diese Objekte bei Bedarf manuell als einfache rechteckige Quader markieren. Da dies jedoch optional und mühsam ist, können sich Entwickler nicht darauf verlassen, dass Benutzer dies getan haben.

Wenn eine Technologie wie SceneScript in das Mixed-Reality-Szenen-Setup von Quest 3 integriert würde, könnten Entwickler automatisch virtuelle Inhalte auf oder um bestimmte Möbelelemente platzieren. Sie könnten nur Ihre Fenster durch Portale oder Ihren Stuhl durch einen virtuellen Sitz ersetzen oder Ihr Sofa in eine Sandsackposition verwandeln. Diese Dinge sind heute möglich, indem man den Benutzer auffordert, die Möbel manuell zu markieren, oder manchmal mit manuellen Algorithmen, die das Szenennetz interpretieren, aber SceneScript könnte es nahtlos und automatisch machen.

Technologien wie SceneScript könnten auch großes Potenzial für KI-Assistenten in zukünftigen Headsets haben seine eventuelle AR-Brille. Als Beispiel nennt Meta Fragen wie „Passt dieser Schreibtisch in mein Schlafzimmer?“ oder „Wie viele Töpfe Farbe wären nötig, um diesen Raum zu streichen?“ sowie Befehle wie „Stellen Sie die [AR/MR-App] auf den großen Tisch“.

Derzeit beschreibt Meta SceneScript jedoch lediglich als Forschung und nicht als kurzfristige Produktfunktionsaktualisierung. Auch wenn diese Technologie irgendwann in Quest 3 Einzug halten könnte, gibt es keine Anzeichen dafür, dass dies in absehbarer Zeit geschehen wird.

• SEO-gestützte Content- und PR-Distribution. Holen Sie sich noch heute Verstärkung.
• PlatoData.Network Vertikale generative KI. Motiviere dich selbst. Hier zugreifen.
• PlatoAiStream. Web3-Intelligenz. Wissen verstärkt. Hier zugreifen.
• PlatoESG. Kohlenstoff, CleanTech, Energie, Umwelt, Solar, Abfallwirtschaft. Hier zugreifen.
• PlatoHealth. Informationen zu Biotechnologie und klinischen Studien. Hier zugreifen.
• Quelle: https://www.uploadvr.com/meta-scenescript-research/