Møt Googles Next-Generation Virtual Reality Platform

I går, på Googles IO-konferanse, viste Google frem fremtiden for den virtuelle virkeligheten - og det er ikke alle laget av papp. Dette er overraskende, fordi Googles tidligere ventures i rommet har vært, vel, litt halvhjertet.

Ikke misforstå meg: Google Kart, et minimalistisk VR-skall for smarttelefoner, er utvilsomt ryddig - men begrensningene er klare. Det er en av Googles berømte 20% prosjekter - et arbeid av kjærlighet av en håndfull medarbeidere, og det viser. Kartong har et smalt synsfelt, bevegelsesskarphet, ingen posisjonssporing og sykdomsforsinkelse. Det er en oppskrift på dårlig nedsenking og VR-sykdom.

Google Kart har ikke et pannebånd, og det er ikke et tilsyn. Uten hodestropp, må brukerne holde den opp til ansiktene, og tvinge dem til å snu seg med torsos. Det bremser dem ned med et merkbart lag. Og det er greit - vi snakker om et hodesett laget av papp. Det er fortsatt et verdifullt verktøy for å få folk inn i VR, men det er ikke en spillveksler.

Alt som begynner å forandre seg. Google anvender en ubetydelig del av verdens hjernekraft, og på dette års IO-konferanse begynte å bøye noen av den muligheten i VR-rommet. Annonsene er tre ganger.

• For det første er det en betydelig forbedring av Cardboard-headsettet.
• For det andre er det et VR-kamera designet for å produsere en sømløs 3D-opplevelse.
• Til slutt er det Tango VR, en ny VR / AR-plattform bygget opp til Googles gåtefulle 3D-sensingstablett.

Klar? La oss grave inn.

Nytt korthodesett

Den nye designen til Google Cardboard er en klar forbedring - det legger til støtte for større telefoner (opptil seks inches), inkluderer iOS-støtte, og legger til en liten fysisk håndtak på siden av headsettet for innspilling. Det er også designet for å være enklere å bygge og styre.

Bortsett fra det, er det ganske mye den samme historien: små, hylleobjektiver, et pappskall og mye bevegelsessykdom hvis du bruker det for lenge. Dette er en markert forbedring, men vi er ganske nær grensen på kartongskjell, og Google er i et holdemønster til de kan begynne å bygge noe mer nyttig.

VR-kamera

Det nye kameraet utviklet i forbindelse med GoPro, kalles Hoppe. Den består av 16 GoPro kameraer (total kostnad, rundt $ 10.000), arrangert på en sirkelformet plastfeste. Så langt, så verdslig: lignende fester for å produsere VR-video Samsung og Oculus Annonse "Gear VR" Mobile VR-plattform Samsung og Oculus annonserer "Gear VR" Mobile VR Platform Samsung-ledere og Oculus CTO John Carmack reiste seg på scenen for å endelig snakke om en hemmelighetsfullt prosjekt de har slitt bort på for det siste året, kalt "Gear VR." Les mer er allerede på markedet. Hvor det blir veldig kul er den såkalte “Hopp Assembler,” et stykke programvare laget av Google for å kutte knuste VR-artefakter.

For å forstå denne programvaren må du forstå problemet det prøver å løse. Oculus 'John Carmack snakker om problemene med 3D panoramaopptak.

“Det de gjør, er at du har skiver tatt fra flere kameraer, så rett fram er det riktig stereo [...] og så her er det riktig for denne [vinkel]. Men det betyr at hvis du ser på hva som var riktig for øynene her, men du ser på øyet ditt, her er det ikke den riktige ulempen for øynene. Og så, enda verre, hvis du [rulle hodet], blir det alt slags dårlig, fordi det er satt opp bare for øynene rett fram. “

Jump er en måte å fikse dette på. Google bruker maskinens visjonsteknologi til å sammenligne bildene sammen og finne ut 3D-geometrien i scenen. Programvaren bruker denne rekonstruksjonen til å skape et rent, sømfritt perspektiv, med perfekt stereo fra alle vinkler.

Google planlegger å la dette innholdet bli vist via YouTube ved hjelp av Google Cardboard - selv om det ikke er noe ord på støtte for mer sofistikerte VR-hodetelefoner som Oculus Rift.

Det er allerede en stor seier. Likevel kan teknologien brukes til å gjøre mer - mye mer. Under demonstrasjonen viser Google det virtuelle kameraet som beveger seg inne i ringen, og oppdaterer perspektivet jevnt. Akkurat nå baker Google 3D-dataene til stereo panoramaer. Illusjonen vil fungere fra hvilken som helst rotasjon, men vil bryte ned hvis du ruller hodet eller beveger deg rundt.

I fremtiden kan Google imidlertid vise deg den rekonstruerte 3D-geometrien direkte, noe som gir deg en full VR-videoopplevelse. Kanskje en som støtter hver rotasjonsakse, samt en betydelig grad av posisjonssporing. Dette er ennå ikke implementert, men det er en spennende mulighet for et stort fremskritt i VR-video.

Tango VR

Google Kart har mange problemer, men til og med det beste eksemplet på mobil VR, Samsungs Gear VR-headset Samsung og Oculus, annonserer "Gear VR" Mobile VR-plattformen Samsung og Oculus annonserer "Gear VR" Mobile VR-plattformen Samsung-ledere og Oculus CTO John Carmack reiste seg på scenen for endelig å snakke om et hemmelig prosjekt de har slitt bort i det siste året, kalt "Gear VR." Les mer, har fortsatt en stor ulempe - ingen posisjonssporing.

Rotasjonssporing er ganske enkel. Du kan bruke gyroskoper til å oppdage hvor mye hodet ditt blir, og jordens magnetiske poler gir en praktisk referanse for å forhindre drift. Dette beløper seg til et par dollarers verdi av sensorer, som allerede er forhåndsinstallert i de fleste smarttelefoner.

Posisjonell sporing er en helt annen plate av poutine. Ulike selskaper har taklet problemet på forskjellige måter. Oculus bruker et eksternt kamera som er parret til sporingspunkter på hodesettet, slik at det kan spores ved hjelp av maskinsyn.

HTC og Valve tar en annen tilnærming til deres Vive-hodesett. Ventil og HTC Annonser nytt VR-hodesett for å sende innen jul 2015. Ventil og HTC Annonser nytt VR-hodesett for å sendes innen jul 2015 Valves nye VR-hodesett er det beste verden noensinne har sett. Er Oculus en sjanse? Les mer, bruk mange “fyr” basestasjoner med roterende trommer for å feie hele rommet med laserlys. Trackers på headsettet og kontrollerne er dekket av lyssensorer, som kan oppdage (med ekstremt nøyaktig timing) når de blir rammet av den laseren. Ved å sjekke nøyaktig timing, og utføre noen grunnleggende geometriske beregninger, kan tre sensorer samarbeide for å bestemme den nøyaktige posisjonen til enheten i rommet, i forhold til basestasjonene.

Begge disse tilnærmingene har fordeler, og vi kan diskutere deres relative fortrinn. Begge har imidlertid en ulempe som blir avgjørende i mobil verden: du trenger ekstern maskinvare for å spore headsettet.

Unødvendig å si, dette er et problem for et mobilt headset. Hele punktet med mobil VR er å frigjøre deg fra kablene og infrastrukturen som trengs for høyere desktopopplevelser. Så hva kan vi gjøre med det? Svaret, i hvert fall ifølge Google, er å bruke en kalt teknologi “Visual SLAM” (Samtidig plassering og kartlegging) i forbindelse med en dybdesensor, for å spore punkter i verden. Med dette opprettes et 3D-nett av miljøet for å bestemme hvor enheten er i rom i forhold til startposisjonen.

Google har allerede sendt litt tidlig maskinvare med denne funksjonaliteten i form av Tango-tavlen Google vil sette et 3D-kamera på smarttelefonen - Her er hvorfor Google vil sette et 3D-kamera på smarttelefonen - Her er hvorfor Googles prosjekttango bringer 3d sensorer til mobile enheter. Her er det vi vet så langt. Les mer, som vi har dekket her før. Google mener at sensoren kan revolusjonere måten vi samhandler med enheter på. Som utvikler setter Johnny Lee den i videoen nedenfor,

“I stedet for å tvinge hele livet til dette lille rektangelet [av en smarttelefonskjerm], utvikler Project Tango teknologiene for å hjelpe alt og alle til å forstå nøyaktig hvor de er. Hvor som helst. Ikke bare hvor det er god GPS-dekning, god WIFI-dekning [...] Apparatene vi bruker, vil dele vår forståelse av plass.”

Denne teknologien har spennende applikasjoner i virtuell virkelighet, og nylig har Google begynt å vise dem.

Dette er imponerende, men det er også tidlige dager. Valve bruker en off-the-shelf holster for sin VR-opplevelse sammen med ærlig til Gud NERF pistoler. Tabletten i seg selv er ikke designet for VR - det er tungt, det er høy ventetid, og ergonomien er forferdelig.

Når det er sagt, kan det være den mest imponerende mobile VR-demoen verden noensinne har sett - strengt på grunn av den posisjonssporing det gir. Hodetelefonen lar deg bevege seg fritt, gjennom et innendørs rom (forutsatt at det er nok lys for kameraet å se). Det åpner opp noen spennende muligheter for blandede virkelighetsapplikasjoner.

Mange av ulempene vil bli bedre snart: Google har også annonsert at det samarbeider med prosessorskaperen Qualcomm, og har opprettet en smarttelefon som inneholder hele prosjektet Tango-prosessor-pakken, samt maskinvaren som støtter den. Denne smarttelefonen vil være referansesignal for fremtidig Tango-kompatibel smarttelefon, som bør være mye bedre egnet til VR-applikasjoner.

Når det gjelder posisjonssporing selv, ser sporen ut jevn. Men det som ser bra ut på en dataskjerm kan føles annerledes når du er inne i det. Microsofts HoloLens fem spørsmål om Microsofts "Project HoloLens" Fem spørsmål om Microsofts "Project HoloLens" Microsofts nye Augmented Reality-headset er veldig spennende - men kan de løse de grunnleggende problemene med AR? Read More bruker en lignende teknologi til å posisjonere seg selv, og har merkbare feil i stabiliteten.

I sin presentasjon nevner Johnny Lee at sporing, under gode forhold, er nøyaktig ned til “noen få millimeter eller et centimeter”. Det er imponerende, men ikke helt opp til sub millimeterstandarden for virtuell virkelighet. Det høres ut som om det kan ta en annen generasjon eller to før sporingen er god nok til å gi tethered desktop VR en løp for pengene sine.

Fremtiden, drevet av Google

Hvis du tar alt dette sammen, kan du begynne å se formen på noe interessant som dukker opp om to eller tre år. Tenk deg et øyeblikk, at noen få år fra nå kommer nye smarttelefoner med Tango-maskinvare, en VR-hylster og en versjon av Android optimalisert for low-latency VR. I den fremtiden vil det ikke være uvanlig å se folk trygt stryke nedover gaten, telefon limt til ansiktet, nedsenket i sin egen forsterkede virkelighet.

I den fremtiden er VR-kameraer overalt, og du kan på et øyeblikk hoppe inn i VR-video fra alt på jorden. VR er billig, VR er allestedsnærværende, og VR er en konsekvent behagelig, oppslukende opplevelse, tilgjengelig for millioner av mennesker. Det er drømmen, og Google har brakt det tantalizingly nær virkeligheten.

Hva tror du? Er du interessert i VR-video? Kan du se deg selv å kjøpe et mobilt VR-headsett? Gi oss beskjed i kommentarene!

Utforsk mer om: Google, Record Video, Virtual Reality, Slitesterk teknologi.