Stikkord: sanntids
Et virtuelt skue: levendegjør videoproduksjon
Huslyset går ned, hjertet ditt raser, du har gåsehud, alle i hørevidde skriker, og forestillingen er i ferd med å starte... Forskjellen er imidlertid at du ikke er på et sted, du er faktisk i komforten av ditt eget hjem.
Som vi alle vet har koronaviruspandemien ført til at alle liveopptredener har stoppet fullstendig i første halvdel av året. På grunn av dette har live video kommet i forkant i mange bransjer, enten det er for live-arrangementer eller universitetsforelesninger. Dette stiller spørsmålet; hvordan kan du oppnå en opplevelse som er like oppslukende som å delta på en konsert eller foredrag, for eksempel personlig? Utvidet virkelighet kan være svaret.
Utvidet virkelighet (XR) er et paraplybegrep i liveproduksjon som kombinerer utvidet (AR), virtuell (VR) og blandet virkelighet (MR) elementer for å utvide virkeligheten vi opplever ved å blande den virtuelle og den "virkelige" verdenen. I følge Visual Capitalist forventes XR å vokse til en markedsstørrelse på mer enn 209 milliarder dollar (160 milliarder pund) innen 2022 og brukes allerede i mange bransjer som bedriftsarrangementer, utdanning, kringkasting, live musikk og e-sport, slik at både merker, artister og organisasjoner kan koble seg til publikum eksternt.
Teknologien antas imidlertid å ta virtuelle produksjoner til neste nivå. Faktisk har selskapet 'disguise' utviklet en utvidet virkelighet (xR)-plattform som lar både kreative og tekniske mennesker forestille seg, skape og levere spektakulære live visuelle opplevelser. "Det er en maskinvare- og programvareløsning som lar oss kartlegge video på alle slags kreative overflater og reagere på miljøet på forskjellige måter," sier Peter Kirkup, global sjef for tekniske løsninger i disguise.
So hvordan virker det? xRs virtuelle settutvidelse plasserer presentatører i miljøer som er større enn de tilgjengelige plassene, og skaper mer overbevisende innhold for å øke publikumsengasjementet. Denne fullstendige fordypningen gir mulighet for interaksjon med datagrafikkelementer (CG), ekte belysning og støtte for reflekterende og refraktive rekvisitter. Det virtuelle miljøet kombinerer kamerasporing og sanntidsinnhold, ikke bare synlig på skjermen, men live på settet og på kameraet. Denne prosessen gir direktører og designere mer kontroll og raskere kalibreringsarbeidsflyter.
Bildekreditt: forkledning
Skaperne sier at xR-arbeidsflyten også raskt og nøyaktig kan justere de virtuelle verdenene, og bringe sammen innholdssystemet, kamerasporingssystemet og LED-skjermen, med pikselnøyaktig presisjon. Denne metoden, kjent som romlig kalibrering, finner sted på settet og kan gjøres på under 30 minutter. "Systemet lar oss sette strukturlysmønstre på LED-skjermen, og deretter oppfatte dem gjennom kameraet," forklarer Kirkup. "Dette systemet hjelper oss også å forstå hvor kameraet er i virkeligheten mot hva sporingssystemet forteller oss, og kalibrere forholdet mellom de to."
Som en del av xR-arbeidsflyten håndterer disguise blandingen av virkelige og virtuelle verdener på grunn av fargekalibreringsprosessen som er innebygd i systemet. Dette gjør at de forskjellige 'verdenene' kan fremstå som ett sømløst miljø. Systemet er også gjengivelsesmotoragnostisk, noe som lar reklamene velge sin foretrukne innholdsmotor, for eksempel spillmotorene Notch, Unreal og Unity, for å levere høykvalitets grafikk til produksjonene deres. Dessuten lar forkledning brukere synkronisere flere gjengivelsesmotorer fra en enkelt tidslinje. Den har også latenskompensasjon innebygd i arbeidsflyten for å sikre minimale ventetider for å levere slike opplevelser.
Ifølge selskapet er artister en av mange grupper som kan bruke xR til å opptre live, ved å bruke innholdsmotorer for å skape og gjengi ubegrensede muligheter for videofortellingen i sanntid. Dette transporterer seerne til en verden utenfor de fysiske LED-veggene – en opplevelse som nylig har blitt oppnådd av den amerikanske sangeren Katy Perry. Her utnyttet teknologiselskapet XR Studios disguises teknologi for å bringe det de beskrev som "fremtiden for kringkasting" til amerikansk TV i primetime, der den Grammy-nominerte fremførte sin siste singel 'Daisies' i sesongfinalen av American Idol.
"Den sømløse utvidelsen av de virkelige LED-skjermene til de virtuelle miljøene kunne bare gjøres ved hjelp av disguises xR-kameraregistreringsarbeidsflyt, som tillater veksling mellom kameraperspektiver og LED-innholdet. Bytting av flere kameraer mellom perspektiver tillot oss også å bytte kamera, og LED-innholdet,” forklarer Scott Millar, en disguise xR-arbeidsflytspesialist som ga kreativ teknologistøtte på prosjektet. Ved å bruke romlig kartlegging av disguise xR, var teamene som jobbet med prosjektet i stand til nøyaktig nøkkelbilde av posisjonen til virkelige og virtuelle verdener til ett sammenhengende sted hvor koreografert handling kunne finne sted.
Her er en kommentar til xR-oppsettet og komponentene som ble demonstrert under Katy Perrys American Idol-opptreden. Det er viktig å merke seg at AR-elementene og set-utvidelsen ikke er der i det virkelige liv, og kameraet "ser" ikke disse elementene.
Bildekreditt: forkledning
Katy Perry har ikke vært den eneste verdenskjente artisten som har opptrådt virtuelt med denne plattformen. Teknologien gjorde det mulig for partner XR Studios å skape et miljø for Black Eyed Peas for å promotere deres nye album på tvers av primetime TV-serier over hele verden. Den Grammy-prisvinnende hiphop-gruppen spilte inn fremføringer av fire nye sanger, fra deres åttende studioalbum «Translation», med XR Studios. Disse ble deretter distribuert i "kampanjepakker" til en håndfull primetime-show over hele verden, inkludert Good Morning America og over hele Europa.
Plattformen tillot interne team å designe og gjenskape miljøer, samt hente inn en artist som ikke var i stand til å ta opptaket. I fremføringen av den nye singelen "Ritmo (Bad Boys For Life)", krediterer sangen et gjesteinnslag med den colombianske reggaeton-sangeren J Balvin som ikke kunne være til stede personlig. For å overvinne dette tillot disguise xR Silent Partners Studios, som designet innholdet for videoene, å lage en 3D digital versjon av sangeren i innholdet og virtuelt fremføre verset hans blant de originale designene til sangens musikkvideo.
"Will.i.am og bandet har alltid forskjøvet teknologiens grenser når den går over til musikkproduksjon, promotering og forbruk, så en disguise xR-arbeidsflyt for opptredenene deres passet virkelig perfekt for dem som gruppe," forklarer JT Rooney fra Silent Partners, som var tett involvert i opprettelsen av innholdet med Will.i.am og bandets ledelse. Bandet fremførte også en av sine mest kjente sanger, ‘Where Is The Love?’ som en del av kampanjepakken. Begynner på en rund plattform, med fremtredende AR-elementer av det røde spørsmålstegn-logoen, som vist i den originale musikkvideoen til sangen, svevende over bandet, og naturen rundt dem utvikler seg sakte. Bakgrunnen viste navnene på nylige ofre for politibrutalitet – en gripende uttalelse i lys av nylige globale hendelser.
Andre opptredener av bandet så xR-plattformen "utvide settet", med to dansere på settet som reagerte på de virtuelle danserne i scenen bak dem. Lagene bestemte seg også for å bruke speil i forestillingen. Og å kombinere speilene med LED-veggene i det virtuelle rommet tillot naturlige refleksjoner av innhold over LED-en – en teknikk der den grønne skjermen feiler. "Green screen-teknologi er et veldig isolerende og vanskelig miljø for programledere og artister å jobbe i," sier Kirkup. "Du har ikke en ekte reaksjon på miljøet rundt deg, da alt du kan se er grønt. Men med denne utvidede virkelighetsarbeidsflyten overvinner vi det.»
Før pandemien ble xR-teknologien først brukt i en sending som brakte et visuelt skue for seere som så på HP OMEN Challenge e-sportsturneringen i september 2019. Her, forkledningen gx 2c og gx 1 medieservere ble brukt sammen med xR-arbeidsflyten for å drive det sanntidsgenerative Notch-innholdet som fulgte med spillet. Selskapets medieservere hjelper også med å drive det audiovisuelle selskapet White Lights 'SmartStage' system, som har blitt brukt til å lage en oppslukende virtuell klasseromsløsning for et online Masters in Business Administration-program ved Michigan University i USA.
Selskapet tror xR-teknologi vil endre ansiktet til levering i kringkasting, "viser seg å være en viktig livline for å ta virtuelle produksjoner til neste nivå". Tom Rockhill, salgssjef i disguise sier: «xR gjør det mulig for kreative og tekniske fagfolk å fortelle historier på nye og innovative måter for verdens ledende merkevarer og artister, og produserer muligheter for samarbeid, kombinere team og teknologier for å drive en enkelt kreativ visjon. ”
Siste etterretning
