211service.com
Mensen in virtual reality staan op het punt er veel realistischer uit te zien
Toen ik onlangs in een kantoor in San Francisco stond, werd ik gecoacht op basis van boksen in een sportschool, keek ik naar een model tijdens een fotoshoot en zag ik een man rappen bij Venice Beach. Maar hoewel wat ze deden interessant was, kon ik niet stoppen met naar hun peuken te staren.
Dat komt omdat deze mensen, allemaal virtual-reality-creaties van een startup genaamd 8i , zag er redelijk realistisch uit. En ik bekeek ze terwijl ik een HTC Vive-headset droeg die was opgesteld in een open ruimte die groot genoeg was om rond te dwalen zonder ergens tegen aan te botsen. Zo had ik genoeg ruimte om me te concentreren op de details die ik het meest fascinerend vond - en in dit geval was het, toegegeven, de manier waarop de stof van hun kleding eruitzag op hun derrières en benen.
Het doel van 8i is om mensen vast te leggen met een reeks camera's en ze te laten zien op een manier die zo levensecht mogelijk is in virtual reality. De CEO en mede-oprichter, Linc Gasking, denkt dat er veel toepassingen voor zijn - het zou kunnen leiden tot virtual reality-films waarmee je de acties van live-action-personages vanuit verschillende hoeken kunt bekijken, en concerten waar je van dichtbij en persoonlijk kunt komen met je favoriete musicus. Of misschien zou het leren op afstand gemakkelijker kunnen maken: je zou rond je yogaleraar kunnen lopen om een beweging te onderzoeken voordat je het zelf probeert.
8i filmt onderwerpen vanuit vele hoeken en reconstrueert ze als 3D-avatars in virtual reality, zodat een virtual reality-kijker rond kan lopen en ze vanuit verschillende gezichtspunten kan verkennen.
Startup 8i legt mensen, zoals deze bokscoach en bokser, op video vast met een reeks camera's die overal om hen heen zijn geplaatst en verwerkt de beelden vervolgens voor gebruik in virtual reality.
Dit soort ervaringen zouden anders zijn dan de manier waarop je tegenwoordig live-action-inhoud in virtual reality ziet. Als kijker die de headset draagt, ben je meestal passief en zit je in het midden van een bol van vastgelegde video waarmee je geen interactie kunt hebben. Maar 8i wedt dat nieuwe high-end headsets zoals de Oculus Rift en HTC Vive, die gebruikers enige bewegingsvrijheid geven door positionele tracking toe te voegen, een markt zullen creëren voor steeds meeslependere ervaringen.
Wat we hebben gevonden, is dat er echt een race is naar het creëren van een ongelooflijk realistische ervaring, zegt Gasking.
Het bedrijf begint elke zogenaamde volumetrische persoon voor virtual reality te maken door te filmen op een groen podium omringd door camera's (8i heeft een podium opgesteld in Los Angeles met 40 high-definition camera's en een andere in Wellington, Nieuw-Zeeland, met 20) . Na het opnemen van een video, zoals die van de bokscoach die ik zag, gebruikt het bedrijf zijn software om de beelden aan elkaar te naaien om alleen de persoon te laten zien - gedetailleerd, driedimensionaal en zichtbaar vanaf de voorkant, achterkant of zijkanten. De resultaten kunnen ook in verschillende omgevingen worden geplaatst, zoals een sportschool of een woestijn, die computergegenereerd, fotorealistisch of een combinatie kunnen zijn.
Op dit moment zijn de resultaten een beetje schokkend. In de demo's die ik zag, zagen de gezichten van mensen er redelijk realistisch uit, maar een beetje afwijkend (misschien zachter dan ze zouden moeten zijn), wat bijna een griezelig vallei-effect creëerde. (Gasking zegt dat dit het resultaat is van het algoritme dat is gebruikt om de video in drie dimensies te verwerken, en hij verwacht dat dit in de loop van de tijd zal verbeteren.) Toch werd ik aangetrokken door de details die in hun kleding werden vastgelegd. Kijkend naar de trainingsbroek op de bokscoach en de jurk op het model was fascinerend; ze zagen er heel levensecht uit (wat logisch is, aangezien ze aanvankelijk als video's waren opgenomen).
Eind deze maand, op tijd voor de Rift-release van Oculus, is het bedrijf van plan een nieuwe versie van een app uit te rollen waarmee mensen een reeks van zijn realistische mensen in verschillende virtuele ervaringen kunnen bekijken. Het werkt ook samen met makers van virtual reality-inhoud, zoals journalisten en filmmakers Nonny de la Pena .
Jeremy Bailenson , directeur van Stanford's Virtueel laboratorium voor menselijke interactie en medeoprichter van virtual reality sporttrainingsbedrijf Strivr Labs , is het eens met de beoordeling van 8i dat de tijd rijp is om naar superrealistische avatars in virtual reality te gaan, en hij zegt dat het gebruik van camera's om dit te laten gebeuren veel minder werk voor programmeurs betekent. Zodra bedrijven de technieken verbeteren, verwacht hij dat we veel van dergelijke avatars in VR zullen zien.
Maar hij waarschuwt dat het bouwen van 3D-avatars door mensen in video vast te leggen - in plaats van ze als 3D-modellen te bouwen - betekent dat ze geen nieuwe dingen kunnen doen, zoals op jou reageren.
Wat VR op veel manieren netjes maakt, is de interactiviteit, de manier waarop het op je kan reageren, zegt hij.