Zephyrnet-logo

Roblox presenteert 3D Motion en Rendering Research op SIGGRAPH 2023 – Roblox Blog

Datum:

Met trots delen we onze innovaties bij ACM SIGGRAPH 2023, de belangrijkste conferentie voor computergraphics en interactieve technieken, die plaatsvindt van 6 tot 10 augustus in Los Angeles. Tijdens het evenement presenteren onze onderzoekers zes technische papersessies, twee Frontiers Workshops, twee Real-Time Live-evenementen en een postersessie. Ons team zal tijdens de conferentie beschikbaar zijn om Roblox en ons onderzoek op onze stand te bespreken. We zijn de commissie ook dankbaar voor het opnemen van ons werk in de zeer selectieve technische papers-trailer.

frameborder=”0″ allow=”versnellingsmeter; automatisch afspelen; klembord-schrijven; versleutelde media; gyroscoop; foto in foto; web-share” allowfullscreen>

Roblox Research streeft de fundamentele wetenschap van technologie na voor ons sociale 3D-platform, met als doel een miljard mensen met optimisme en beleefdheid te verbinden. We bevorderen het creëren van 3D-inhoud, fysieke simulatie en realtime moderatie met behulp van een combinatie van eerste principes en kunstmatige intelligentie (AI) -technieken. Ons nieuwste werk stelt haar, stoffen, objecten en landschappen in staat om te reageren op beweging, botsingen en wind, net zoals in de echte wereld. Omdat we een wereldwijd platform met honderden miljoenen gebruikers ondersteunen, moet elk aspect zowel aan de client- als aan de serverzijde kunnen worden geschaald en moet elk apparaat worden ondersteund, van oudere telefoons tot de nieuwste AR/VR-headsets. Lees hieronder meer over het werk dat we zullen presenteren en bekijk een schema van waar u ons kunt vinden op SIGGRAPH. 

Geoptimaliseerde weergave

Naarmate 3D-werelden realistischer worden, worden structuren en terreinen steeds complexer. Het renderen van deze complexe omgevingen vereist oplossingen voor real-world effecten zoals golvende of gedraaide stoffen, oneffen terrein, enz. In hun presentatie, Oppervlaktevereenvoudiging met behulp van intrinsieke foutstatistieken, stellen Roblox-onderzoeker Hsueh-Ti Derek Liu en collega's van Carnegie Mellon University en University of Toronto een methode voor om intrinsieke triangulaties te vereenvoudigen. Klassieke maasvereenvoudiging behoudt het uiterlijk van een object voor weergavedoeleinden, maar wat als het doel simulatie is, waarbij objecten kunnen worden gedraaid, gebogen of gevouwen? Deze methode vereenvoudigt de mesh voor simulatie door de veel grotere ruimte van intrinsieke triangulaties te verkennen, wat leidt tot meer dan 1,000x snellere resultaten bij algemene taken zoals het berekenen van geodetische afstanden. Deze nieuwe methode zou kunnen bijdragen aan meer detailniveaus voor simulatie.

Liu zal ook werk presenteren aan Differentieerbare hoogteveldpadopsporing in samenwerking met collega's van de George Mason University, de University of Toronto en de University of Waterloo. Dit maakt een snelle, realistische weergave van terrein, schaduwen en 3D-objecten voor AI-trainingstoepassingen mogelijk. Deze aanpak realiseert real-time frame rates, ordes van grootte sneller dan de meeste bestaande 3D mesh differentiële renderers. Het ontgrendelt de mogelijkheid voor interactieve inverse rendering-applicaties, inclusief toekomstige versies van onze generatieve AI- en moderatie-AI-tools. De onderzoekers demonstreren deze methode met veel interactieve taken, zoals terreinoptimalisatie en op tekst gebaseerde vormgeneratie.

Realistische beweging voor Avatars en daarbuiten

Menselijke beweging is complex en zeer gevarieerd. Ons doel is om dit nauwkeurig te reproduceren in al zijn getrouwheid voor realisme en expressie in virtuele omgevingen, wat een grote uitdaging is. Multitasken, of het naadloos combineren van verschillende gedragingen, is bijvoorbeeld iets waar mensen heel bedreven in zijn. Traditionele computergraphics richten zich op enkelvoudig gedrag, zoals lopen of gooien, en vereisen expliciet geschreven gecombineerd gedrag. 

In hun krant, Samengesteld bewegingsleren met taakcontrole, schetsen Roblox-onderzoekers Victor Zordan en Pei Xu, samen met collega's van Clemson University en de University of California, Merced, een nieuwe benadering van versterkend leren voor multitask motion control. Dit onderzoek stelt een versterkende leerbenadering voor voor complexe taakgestuurde bewegingsbesturing voor fysiek gesimuleerde karakters. Met deze multiobjective-control-benadering kunnen personages samengestelde multitask-bewegingen uitvoeren, zoals jongleren tijdens het lopen. Ze kunnen ook een breed scala aan andere activiteiten combineren zonder expliciete referentiebewegingsvoorbeelden van het gecombineerde gedrag. Deze aanpak ondersteunt ook steekproef-efficiënte training door bestaande controllers te hergebruiken. 

frameborder=”0″ allow=”versnellingsmeter; automatisch afspelen; klembord-schrijven; versleutelde media; gyroscoop; foto in foto; web-share” allowfullscreen>

Gesimuleerde kapsels vormen een andere bewegingsuitdaging in meeslepende 3D-omgevingen. Daar kunnen zorgvuldig ontworpen en gestylede haarmodellen onmiddellijk bezwijken onder hun eigen gewicht, niet in staat hun beoogde vorm te behouden tegen de zwaartekracht in. Verzakkingsvrije initialisatie voor op strengen gebaseerde hybride haarsimulatie, gepresenteerd door Roblox-onderzoeker Cem Yuksel en collega's van LightSpeed ​​Studios, stelt een nieuw initialisatiekader voor op strengen gebaseerde haarsystemen voor. Dit werk elimineert uitzakken door de interne krachten op te lossen die het haar moet vertonen om zijn vorm te behouden met zwaartekracht en andere externe krachten. Dit wordt bereikt zonder de haardynamiek onnodig te verstijven en door rekening te houden met botsingen op strengniveau. Deze paper werd ook bekroond met een Beste papieren eervolle vermelding

frameborder=”0″ allow=”versnellingsmeter; automatisch afspelen; klembord-schrijven; versleutelde media; gyroscoop; foto in foto; web-share” allowfullscreen>

Roblox is een op simulatie gebaseerd 3D-platform, waarin de primaire interacties tussen objecten en met avatars worden gemedieerd door natuurkundige principes in plaats van expliciete code. Dit jaar delen we twee nieuwe resultaten over verschillende ontwikkelingen in objectsimulatie.

Samen met collega's van UCLA, University of Utah en Adobe Research zal Yuksel een presentatie geven Meerlaagse dikke schelpen, die een nieuwe benadering voorstelt om diktebewuste simulaties mogelijk te maken voor materialen zoals leren kledingstukken, kussens, matten en metalen platen. Deze benadering vermijdt afschuifvergrendeling en legt op efficiënte wijze fijne rimpeldetails vast en opent de deur naar snelle, hoogwaardige, diktebewuste simulaties van een verscheidenheid aan structuren. 

frameborder=”0″ allow=”versnellingsmeter; automatisch afspelen; klembord-schrijven; versleutelde media; gyroscoop; foto in foto; web-share” allowfullscreen>

Een andere bewegingsuitdaging in simulaties komt wanneer objecten botsen en uit elkaar gaan. In de echte wereld kunnen objecten over het algemeen botsen en weer uit elkaar trekken - nog steeds als twee verschillende vormen. Yuksel zal met collega's van de Universiteit van Utah een methode presenteren om de Kortste pad naar grens voor kruisende mazen vanuit een bepaald intern punt. Het biedt een snelle en robuuste oplossing voor het afhandelen van botsingen en zelf-botsingen, terwijl vervormbare volumetrische objecten worden gesimuleerd. Dit maakt het mogelijk om uiterst uitdagende zelf-botsingsscenario's te simuleren met behulp van efficiënte technieken. Een voorbeeld is XPBD, dat geen garanties biedt op het oplossen van botsingen, in tegenstelling tot computationeel dure simulatiemethoden die bijna een botsingsvrije toestand moeten behouden.

frameborder=”0″ allow=”versnellingsmeter; automatisch afspelen; klembord-schrijven; versleutelde media; gyroscoop; foto in foto; web-share” allowfullscreen>

Interactieve Evenementen

Alles op het Roblox-platform is interactief en in realtime. De beste manier om onze nieuwe ontwikkelingen te ervaren, is door ze in actie te zien door middel van live demo's en onze Real-Time Live-sessies. Bij Roblox generatieve AI in actie, zullen onderzoekers Brent Vincent en Kartik Ayyar demonstreren hoe makers natuurlijke taal en andere intentieuitingen kunnen gebruiken om interactieve objecten en scènes te bouwen zonder complexe modellering of codering. Bij Intermediaire realiteit met een AI 3D-geprint personage, Roblox's Kenny Mitchell en 3Finery Ltd's Llogari Casas Cambra zullen een AI-model presenteren dat live spraakherkenning verwerkt en reacties genereert als een 3D-geprint personage - waarbij de functies van het personage synchroon met de audio worden geanimeerd. 

Roblox-wetenschappers zullen ook spreken op panelen tijdens de Frontier Workshops. Bij Beyond IRL, hoe 3D interactieve sociale media de manier veranderen waarop we omgaan, uitdrukken en denken, zullen Roblox-wetenschappers Lauren Cheatham en Carissa Kang zich aansluiten bij domeinexperts, sociale wetenschappers en gedragsonderzoekers om te bespreken hoe meeslepende virtuele omgevingen houdingen en gedragingen kunnen helpen vormgeven, identiteitsverkenning ondersteunen en jongere generaties helpen gezonde grenzen te stellen die zich kunnen uitstrekken tot hun echte wereld . Bij Expressieve Avatar Interacties voor Co-ervaringen Online, zullen Roblox-wetenschappers Ian Sachs, Vivek Virma, Sean Palmer, Tom Sanocki en Kenny Mitchell, samen met andere experts, uitdagingen en lessen bespreken die zijn getrokken uit het inzetten van ervaringen voor interactiviteit op afstand en expressieve communicatie met een grote wereldwijde gemeenschap.  

Adrian Xuan Wei Lim zal een postersessie presenteren om te presenteren Omgekeerde projectie: real-time mapping van lokale ruimtetexturen, een nieuwe projectieve techniek die is ontworpen voor gebruik in games en waarmee een sticker in realtime rechtstreeks op de textuur van een 3D-object wordt geschilderd. Door gebruik te maken van projectietechnieken die worden berekend in lokale ruimtetexturen en naar buiten gericht, kunnen makers die alles gebruiken, van goedkope Android-apparaten tot geavanceerde gaming-desktops, genieten van de personalisatie van hun activa. Deze voorgestelde pijplijn zou een stap kunnen zijn in de richting van het verbeteren van de snelheid en veelzijdigheid van het schilderen van modellen.


Bekijk hier alle papers die het Roblox Research-team op SIGGRAPH 2023 zal presenteren. Bezoek onze stand en sessies, hieronder vermeld. We kijken ernaar uit u persoonlijk te ontmoeten!


Zondag, aug. 6

Maandag 7 augustus

Dinsdag 8 augustus

Woensdag 9 augustus

Donderdag 10 augustus

spot_img

Laatste intelligentie

spot_img