Meta-onderzoek suggereert dat VR's meest transformerende winst in telepresence en visueel realisme kan komen van verbeteringen in de helderheid en het dynamisch bereik van het scherm.

Sprekend over Meta CTO Andrew Bosworth's podcast, sprak het hoofd van onderzoek naar weergavesystemen van het bedrijf over de enorme kloof in helderheid tussen de 100 nits die worden geleverd door Meta's toonaangevende Quest 2-headset en de meer dan 20,000 nits die worden geleverd door het Starburst-onderzoeksprototype. Deze laatste kan zelfs heldere binnenverlichting evenaren, terwijl ze de huidige best presterende high-dynamic range (HDR) televisies ver overtreffen, die top uit rond de 1,000 nits.

Douglas Lanman, Meta's toponderzoeker op het gebied van beeldschermen, verwees naar deze kloof als wat "we het meest willen, maar op dit moment het minst kunnen leveren." Het prototype is zo zwaar met een gewicht van 5 tot 6 pond met koellichamen, een krachtige lichtbron en optica, dat als je naar Starburst kijkt, het comfortabel van bovenaf moet worden opgehangen en met handgrepen tegen het gezicht moet worden gehouden. Terwijl we Sony's kennen PlayStation VR 2-display brengt HDR voor de eerste keer voor consumenten-VR is de exacte helderheid en het dynamische bereik onbekend.

"Je zei dat je je oog er op een bepaalde manier op voelt reageren", vertelde metaonderzoeker Nathan Matsuda aan Tested's Norman Chan toen hij Starburst probeerde. "We weten dat er een verscheidenheid aan perceptuele signalen zijn die je krijgt van die uitgebreide luminantie, en een deel daarvan is te wijten aan werk dat werd gedaan voor de beeldschermindustrie voor televisies en bioscoop, maar natuurlijk als je een meer meeslepend weergaveapparaat hebt zoals dit waar je een breed gezichtsveld hebt, binoculaire parallax enzovoort, we weten niet of de perceptuele reacties daadwerkelijk rechtstreeks afkomstig zijn van het eerdere werk dat met tv's was gedaan, dus een van de redenen waarom we dit hebben gebouwd om mee te beginnen is zodat we kunnen beginnen te ontrafelen waar die verschillen zitten, waar de drempels kunnen zijn waar je het gevoel krijgt dat je naar een echt licht kijkt in plaats van naar een afbeelding van een licht, wat ons uiteindelijk zal leiden tot het kunnen bouwen apparaten waarmee contentmakers vervolgens content kunnen produceren die gebruik maakt van dit volledige aanbod.”

Voor degenen die het hebben gemist, bood Meta deze week een ongekende kijk op het onderzoek naar het prototype VR-headset in combinatie met de aankondiging van een doel om op een dag de "visuele Turing-test“. Het doorstaan ​​van de test zou betekenen dat je een VR-headset moet maken met beelden die niet van de werkelijkheid te onderscheiden zijn. Op Bosworth's podcast, Boz to the Future, heeft Lanman op vier manieren de uitdagingen beschreven bij het bevorderen van VR-schermen in de richting van dit doel: resolutie, varifocaal, vervormingscorrectie en HDR - met de laatste beschreven als misschien wel de meest uitdagende om volledig te bereiken.

Lanman:

In deze [Starburst]-prototypes die we hebben gebouwd, kijk je naar een zonsondergang... En als we het over aanwezigheid willen hebben, heb je het gevoel dat je erbij bent. Je bent op Maui, kijkend naar de ondergaande zon en de haren in je nek gaan omhoog.

Dit is dus degene die we het meest willen, maar op dit moment het minst kunnen leveren. Waar we zijn, is gewoon het uitvoeren van studies, om te bepalen wat zou werken? Hoe kunnen we de rendering-engine veranderen? Hoe zouden we de optica en displays kunnen veranderen om ons dit te geven? Maar hoog dynamisch bereik, dat is de vierde, misschien wel de koning van allemaal.

De Starburst-prototype, hieronder afgebeeld, demonstreerde een implementatie van extreem heldere beelden in VR met hoog dynamisch bereik (HDR), die Meta-CEO Mark Zuckerberg beschreef als "misschien wel de belangrijkste dimensie van allemaal."

Hoewel de helderheid van Starbust het gevoel van aanwezigheid en realisme aanzienlijk verbetert, zou het huidige prototype "uiterst onpraktisch" zijn om als product te verzenden, zoals Zuckerberg het uitdrukte. Als je er nog niet in bent gedoken, raden we je ten zeerste aan de tijd te nemen om de volledige video van Tested hierboven te bekijken en naar de podcast te luisteren met Lanman en Bosworth hieronder ingesloten. Zoals Meta's CTO zei, "geven de prototypes je" het vermogen om over de toekomst te redeneren, wat super handig is omdat we ons hierdoor kunnen concentreren.”

We hebben ook contact opgenomen met Norman Chan op Tested, omdat zijn exclusieve blik op de hardware-prototypes en de opmerking die hij tegen Zuckerberg maakte dat Starbust "de demo was die ik niet wilde lanceren", suggereert dat HDR waarschijnlijk zal worden een cruciaal verbeterpunt voor toekomstige HMD's. Waar de kloof tussen de hoekresolutie van Quest 2 en de "retinale" resolutie van de Butterscotch-prototype is 3x, de kloof tussen de helderheid van Starburst en een Quest 2 is bijna 200x, wat betekent dat er een grotere kloof moet worden overgestoken in helderheid en dynamisch bereik voordat het in staat is om "vrijwel elke binnenomgeving" te evenaren, zoals Lanman zei over Starburst.

"De kwalitatieve voordelen van HDR waren opvallend in de Starburst-prototypedemo die ik probeerde, ook al had het scherm van de headset verre van resolutie van het netvlies", schreef Chan ons. "Het wordt een grote technische uitdaging om tot ongeveer 20,000 nits in een consumentenheadset te komen, maar ik zou incrementele verbeteringen in luminantie kunnen zien door efficiëntie in de transmissie van het beeldscherm. Wat me opwindt, is dat het produceren van HDR-beelden niet rekenkundig belastend is - er zijn zoveel bestaande media met ingebouwde HDR-metadata die zullen profiteren in HDR VR-headsets. Ik kan niet wachten om enkele van mijn favoriete VR-games opnieuw te spelen die zijn geremasterd voor HDR!”

UploadVR Nieuws Schrijver Harry Baker heeft bijgedragen aan dit rapport.