Epic Games, het bedrijf dat Unreal Engine maakt, heeft onlangs een substantiële update uitgebracht voor zijn MetaHuman-tool voor het maken van karakters, waarmee ontwikkelaars voor het eerst scans van echte mensen kunnen importeren voor gebruik in realtime toepassingen. De verbeteringen bieden een glimp van een toekomst waarin iedereen gemakkelijk een realistische digitale versie van zichzelf in VR en de metaverse in het algemeen kan brengen.

De MetaHuman-tool van Epic is ontworpen om het voor ontwikkelaars gemakkelijk te maken om een ​​breed scala aan 3D-personagemodellen van hoge kwaliteit te maken voor gebruik in realtime toepassingen. De tool werkt als een geavanceerde versie van een 'character customizer' die je zou vinden in een moderne videogame, maar dan met veel meer controle en betrouwbaarheid.

Bij de eerste release waren ontwikkelaars alleen in staat om hun personages te formuleren uit een selectie van vooraf ingestelde gezichten, en vervolgens tools te gebruiken om het uiterlijk van het personage naar hun smaak aan te passen. Natuurlijk experimenteerden velen met het creëren van hun eigen gelijkenis, of die van herkenbare beroemdheden. Hoewel het creëren van karakters met MetaHuman snel gaat - in vergelijking met het handmatig maken van een vergelijkbaar model vanaf het begin - blijft het een uitdaging om de gelijkenis van een specifieke persoon te bereiken.

Maar nu is de nieuwste release bevat een nieuwe 'Mesh to MetaHuman'-functie waarmee ontwikkelaars gezichtsscans van echte mensen (of 3D-beeldhouwwerken gemaakt in andere software) kunnen importeren en het systeem vervolgens automatisch een MetaHuman-gezicht kunnen laten genereren op basis van de scan, inclusief volledige rigging voor animatie.

[Ingesloten inhoud]

Er zijn echter nog enkele beperkingen. Ten eerste worden haar, huidtexturen en andere details niet automatisch gegenereerd; op dit punt is de functie Mesh to MetaHuman voornamelijk gericht op het afstemmen van de algemene topologie van het hoofd en het segmenteren ervan voor realistische animaties. Ontwikkelaars moeten nog steeds huidtexturen leveren en wat extra werk doen om haar, gezichtshaar en ogen af ​​te stemmen op de persoon die ze willen evenaren.

De MetaHuman-tool is nog in vroege toegang en bedoeld voor ontwikkelaars van Unreal Engine. En hoewel we nog niet helemaal in het stadium zijn waarin iedereen gewoon een paar foto's van zijn hoofd kan maken en een realistische digitale versie van zichzelf kan maken, is het vrij duidelijk dat we in die richting gaan.

- - - - -

Als het doel echter is om een ​​volledig geloofwaardige avatar van onszelf te maken voor gebruik in VR en de metaverse in het algemeen, moeten er nog uitdagingen worden opgelost.

Gewoon een model genereren dat lijkt op jou is niet helemaal genoeg. Je hebt het model ook nodig om beweeg zoals jij.

Elke persoon heeft zijn eigen unieke gezichtsuitdrukkingen en maniertjes die gemakkelijk herkenbaar zijn voor de mensen die hem goed kennen. Zelfs als een gezichtsmodel is gemanipuleerd voor animatie, tenzij het is gemanipuleerd op een manier die specifiek is voor uw uitdrukkingen en in staat is om te putten uit echte voorbeelden van uw uitdrukkingen, zal een realistische avatar er nooit zo uitzien als u als het in beweging is.

Voor mensen die u niet kennen, is dat niet zo belangrijk omdat ze geen basislijn van uw uitdrukkingen hebben om uit te putten. Maar het zou belangrijk zijn voor je naaste relaties, waar zelfs kleine veranderingen in iemands gebruikelijke gezichtsuitdrukkingen en maniertjes een reeks aandoeningen kunnen impliceren, zoals afgeleid, moe of zelfs dronken zijn.

In een poging om deze specifieke uitdaging aan te gaan, heeft Meta (niet te verwarren met Epic's MetaHumans-tool) gewerkt aan zijn eigen systeem genaamd Codec Avatars, dat tot doel heeft een realistisch model van je gezicht te animeren met volledig geloofwaardige animaties die uniek zijn voor jou-live.

Misschien zullen we in de toekomst een fusie zien van systemen zoals MetaHumans en Codec Avatars; een om eenvoudig een levensechte digitale avatar te maken en een andere om die avatar op een unieke en geloofwaardige manier te animeren u.