Maak kennis met het Next-Generation Virtual Reality Platform van Google

Advertentie

Gisteren, tijdens de IO-conferentie van Google, liet Google de toekomst van virtual reality zien - en die bestaat niet allemaal uit karton. Dit is verrassend, omdat de eerdere ondernemingen van Google in de ruimte een beetje halfslachtig waren.

Begrijp me niet verkeerd: Google Cardboard, a minimalistische VR-shell voor smartphones is onmiskenbaar netjes - maar de beperkingen zijn duidelijk. Het is een van de beroemdste 20% -projecten van Google - een liefdeswerk van een handvol werknemers, en dat blijkt. Karton heeft een smal gezichtsveld, bewegingsonscherpte, geen positionele tracking en misselijkmakende latentie. Het is een recept voor slechte onderdompeling en VR-ziekte.

Google Cardboard heeft geen hoofdband en dat is geen vergissing. Zonder hoofdband moeten gebruikers het tegen hun gezicht houden, waardoor ze moeten draaien met hun torso. Dat vertraagt ​​ze met een merkbare vertraging. En dat is oké - we hebben het over een headset gemaakt van karton. Het is nog steeds een waardevol hulpmiddel om mensen in de VR te krijgen, maar het is geen gamechanger.

Dat begint allemaal te veranderen. Google maakt gebruik van een niet te verwaarlozen fractie van 's werelds denkkracht en begon tijdens de IO-conferentie van dit jaar een deel van die macht in de VR-ruimte te gebruiken. De aankondigingen zijn drievoudig.

• Ten eerste is er een aanzienlijke verfijning van de Cardboard-headset.
• Ten tweede is er een VR-camera die is ontworpen om een ​​naadloze 3D-ervaring te produceren.
• Ten slotte is er Tango VR, een nieuw VR / AR-platform dat is gebouwd rond de raadselachtige 3D-sensing-tablet van Google.

Klaar? Laten we ingaan.

Nieuwe kartonnen headset

Het nieuwe ontwerp voor Google Cardboard is een duidelijke verbetering - het voegt ondersteuning toe voor grotere telefoons (up tot zes inch), bevat iOS-ondersteuning en voegt een kleine fysieke hendel aan de zijkant van de headset toe invoer. Het is ook ontworpen om gemakkelijker te bouwen en te bedienen.

Afgezien daarvan is het vrijwel hetzelfde verhaal: kleine, kant-en-klare lenzen, een kartonnen schaal en veel bewegingsziekte als je het te lang gebruikt. Dit is een duidelijke verbetering, maar we zitten dicht bij de limiet voor schelpen in kartonnen stijl en Google zit in een vasthoudpatroon totdat ze iets nuttigers kunnen gaan bouwen.

VR-camera

De nieuwe camera die in samenwerking met GoPro is ontwikkeld, wordt de Springen. Het bestaat uit 16 GoPro-camera's (totale kosten, ongeveer $ 10.000), gerangschikt op een ronde plastic houder. Tot nu toe zo alledaags: soortgelijke mounts voor VR-video produceren Samsung en Oculus kondigen mobiel Gear VR-platform aanDirecteuren van Samsung en CTO John Carmack van Oculus stonden op het podium om eindelijk te praten over een geheimzinnig project waar ze het afgelopen jaar aan hebben gewerkt, genaamd 'Gear VR'. Lees verder zijn al op de markt. Waar het echt cool wordt, is de zogenaamde "Jump Assembler", een stuk software dat door Google is gemaakt om schokkende VR-artefacten te verwijderen.

Om deze software te begrijpen, moet u het probleem begrijpen dat het probeert op te lossen. Oculus 'John Carmack vertelt over de problemen met 3D panoramische opname.

"Wat ze uiteindelijk doen, is dat je plakjes hebt genomen van meerdere camera's, dus rechtdoor is het de juiste stereo [...] en dan is het hier juist voor deze [hoek]. Maar dat betekent dat als je kijkt naar wat goed was voor de ogen hier, maar je kijkt vanuit een ooghoek hier, [...] het niet de juiste ongelijkheid voor de ogen is. En, nog erger, als je [je hoofd rolt], wordt het allemaal erg, omdat het alleen is opgezet voor de ogen recht vooruit. “

Jump is een manier om dit op te lossen. Google gebruikt machinevisie-technologie om de afbeeldingen met elkaar te vergelijken en de 3D-geometrie van de scène te achterhalen. De software gebruikt deze reconstructie om een ​​schoon, steekvrij perspectief te creëren, met perfecte stereo vanuit elke hoek.

Google is van plan om dit soort inhoud via YouTube te bekijken met Google Cardboard, hoewel er nog geen bericht is over ondersteuning voor meer geavanceerde VR-headsets zoals de Oculus Rift.

Dat is al een enorme overwinning. Toch kan de technologie worden gebruikt om meer te doen - veel meer. Tijdens de demo laat Google zien dat de virtuele camera in de ring beweegt en het perspectief soepel bijwerkt. Op dit moment bakt Google de 3D-gegevens tot stereopanorama's. De illusie werkt vanuit elke rotatie, maar breekt af als je je hoofd rolt of beweegt.

In de toekomst kan Google u echter de gereconstrueerde 3D-geometrie rechtstreeks laten zien, waardoor u een volledige VR-video-ervaring krijgt. Misschien een die elke rotatieas ondersteunt, evenals een aanzienlijke mate van positionele tracking. Dit is nog niet geïmplementeerd, maar het is een verleidelijke mogelijkheid voor een grote stap voorwaarts in VR-video.

Tango VR

Google Cardboard heeft veel problemen, maar zelfs het beste voorbeeld van mobiele VR, De Gear VR-headset van Samsung Samsung en Oculus kondigen mobiel Gear VR-platform aanDirecteuren van Samsung en CTO John Carmack van Oculus stonden op het podium om eindelijk te praten over een geheimzinnig project waar ze het afgelopen jaar aan hebben gewerkt, genaamd 'Gear VR'. Lees verder heeft nog steeds één groot nadeel: geen positionele tracking.

Rotational tracking is vrij eenvoudig. Je kunt gyroscopen gebruiken om te detecteren hoeveel je hoofd draait, en de magnetische polen van de aarde bieden een handige referentie om drift te voorkomen. Dit komt neer op een paar dollar aan sensoren, die al op de meeste smartphones zijn geïnstalleerd.

Positionele tracking is een geheel andere plaat van poutine. Verschillende bedrijven hebben het probleem op verschillende manieren aangepakt. Oculus gebruikt een externe camera die is gekoppeld aan het volgen van punten op de headset, zodat deze kan worden gevolgd met behulp van machinevisie.

HTC en Valve nemen een andere aanpak voor hun Vive-headset Valve & HTC kondigen nieuwe VR-headset aan voor kerst 2015De nieuwe VR-headset van Valve is de beste die de wereld ooit heeft gezien. Heeft Oculus een kans? Lees verder , gebruik makend van veel "Lighthouse" basisstations met roterende trommels om de hele kamer met laserlicht te vegen. De trackers op de headset en controllers zijn bedekt met lichtsensoren, die kunnen detecteren (met uiterst nauwkeurige timing) wanneer ze door die laser worden geraakt. Door de precieze timing te controleren en enkele eenvoudige geometrische berekeningen uit te voeren, drie sensoren kunnen samenwerken om de exacte positie van het apparaat in de ruimte ten opzichte van de basis te bepalen stations.

Beide benaderingen hebben voordelen en we kunnen hun relatieve verdiensten bespreken. Beide hebben echter een nadeel dat cruciaal wordt in de mobiele wereld: je hebt externe hardware nodig om de headset te volgen.

Onnodig te zeggen dat dit een probleem is voor een mobiele headset. Het hele punt van mobiele VR is om jezelf te bevrijden van de kabels en infrastructuur die nodig zijn voor high-end desktop-ervaringen. Dus wat kunnen we eraan doen? Het antwoord is, althans volgens Google, om een ​​technologie te gebruiken genaamd "Visual SLAM" (Gelijktijdige locatie en mapping) in combinatie met een dieptesensor om punten in de wereld te volgen. Hiermee wordt een 3D mesh van de omgeving gecreëerd om te bepalen waar het apparaat zich in de ruimte bevindt ten opzichte van de startpositie.

Google heeft al een aantal vroege hardware met deze functionaliteit geleverd in de vorm van de Tango tablet Google wil een 3D-camera op uw smartphone plaatsen - hier is waaromGoogle's Project Tango brengt 3D-sensoren naar mobiele apparaten. Dit is wat we tot nu toe weten. Lees verder , die we hier eerder hebben behandeld. Google denkt dat de sensor een revolutie teweeg kan brengen in de manier waarop we met apparaten omgaan. Zoals ontwikkelaar Johnny Lee het in de onderstaande video zegt,

“In plaats van ons hele leven in deze zeer kleine rechthoek [van een smartphonescherm] te dwingen, Project Tango ontwikkelt de technologieën om alles en iedereen te helpen precies te begrijpen waar ze zijn zijn. Overal. Niet alleen waar er goede GPS-dekking is, goede WIFI-dekking [...] De apparaten die we gebruiken, zullen ons begrip van de ruimte delen. "

Deze technologie heeft opwindende toepassingen in virtual reality en onlangs is Google ermee begonnen te pronken.

Dit spul is indrukwekkend, maar het zijn ook vroege dagen. Valve gebruikt een kant-en-klare holster voor hun VR-ervaring, samen met oprechte NERF-pistolen. De tablet zelf is niet ontworpen voor VR - hij is zwaar, hij heeft een hoge latentie en de ergonomie is verschrikkelijk.

Dat gezegd hebbende, is het misschien wel de meest indrukwekkende mobiele VR-demo die de wereld ooit heeft gezien - strikt vanwege de positionele tracking die het biedt. Met de headset kun je vrij bewegen, door elke binnenruimte (op voorwaarde dat er genoeg licht is voor de camera). Dat biedt een aantal opwindende mogelijkheden voor toepassingen met gemengde realiteit.

Veel van de nadelen zullen snel verbeteren: Google heeft ook aangekondigd dat het samenwerkt met processor-maker Qualcomm en een smartphone heeft gemaakt met het volledige project Tango-processorsuite, plus de hardware om het te ondersteunen. Deze smartphone zullen referentieontwerpen zijn voor toekomstige Tango-compatibele smartphones, die veel beter geschikt zouden moeten zijn voor VR-toepassingen.

Wat betreft de positionele tracking zelf, de tracking ziet er soepel uit. Maar wat er goed uitziet op een computerscherm, kan anders aanvoelen als je erin zit. HoloLens van Microsoft Vijf vragen over Microsoft's "Project HoloLens"De nieuwe Augmented Reality-headset van Microsoft is erg spannend - maar kunnen ze de fundamentele problemen van AR oplossen? Lees verder gebruikt een vergelijkbare technologie om zichzelf te positioneren en heeft merkbare storingen in de stabiliteit.

In zijn presentatie vermeldt Johnny Lee dat de tracking, onder goede omstandigheden, nauwkeurig is tot "enkele millimeters of een centimeter". Dat is indrukwekkend, maar niet helemaal volgens de sub-millimeter-standaard voor virtual reality. Het klinkt alsof het nog een generatie of twee kan duren voordat de tracking goed genoeg is om tethered desktop VR een run voor zijn geld te geven.

De toekomst, mogelijk gemaakt door Google

Als je dit allemaal bij elkaar neemt, kun je binnen twee of drie jaar de vorm van iets interessants zien ontstaan. Stel je even voor dat nieuwe smartphones over een paar jaar worden geleverd met Tango-hardware, een VR-holster en een versie van Android die is geoptimaliseerd voor VR met lage latentie. In die toekomst zou het niet ongebruikelijk zijn om mensen met vertrouwen de straat op te zien lopen, de telefoon tegen hun gezicht gekleefd, ondergedompeld in hun eigen augmented reality.

In die toekomst zijn VR-camera's overal en kun je in een oogwenk van alles op aarde in VR-video springen. VR is goedkoop, VR is alomtegenwoordig en VR is een consistent comfortabele, meeslepende ervaring, beschikbaar voor miljoenen mensen. Dat is de droom en Google heeft het verleidelijk dichtbij de realiteit gebracht.

Wat denk je? Ben je geïnteresseerd in VR-video? Zie je jezelf een mobiele VR-headset kopen? Laat het ons weten in de comments!