Microsoft viser av New HoloLens Demos på Build Conference

Microsofts kommende HoloLens-headset er den første high-end forsterkede virkelighetsenheten som har blitt vist for publikum. Dessverre har Microsoft vært så stramt at vi ikke vet mye om det.

I dag, på Microsofts Build Developer Conference i San Francisco, fikk vi en annen spennende titt på teknologien. Demoen selv er skinnende, men ikke veldig informativ. Vi kan imidlertid velge noen viktige detaljer ved å lese mellom linjene. I dette tilfellet valgte Microsoft ikke å vise seg mer informativ enn hva de gjorde.

Demoen

Flere av HoloLens ingeniører kom på scenen for å vise frem noen av de nye demoene de har utviklet for maskinvaren. En demo finner sted som en rekreasjon av en ingeniørs deprimerende sparsom leilighet, og dekker veggene og gulvet med virtuelle apper og leker. En annen bringer noen leger til å vise en modell av en menneskekropp, og tar den fra hverandre. Endelig vokser en kitrobot en uttrykksdyktig, virtuell overkropp og utvider et stort statuspanel, slik at det kan justeres i sanntid.

Djevelen, detaljene

Så langt, så imponerende - men mange av mine første spørsmål om HoloLens Fem spørsmål om Microsofts "Project HoloLens" Fem spørsmål om Microsofts "Project HoloLens" Microsofts nye Augmented Reality-headset er veldig spennende - men kan de løse de grunnleggende problemene med AR ? Les mer forbli ubesvarte. Så la oss se litt nærmere.

okklusjon

Føler demoen litt i gang med deg? Se kamerabevegelsene nøye. Det er ikke bare den vanlige messeshowet. Se demoen igjen, og se etter øyeblikk hvor et menneske passerer foran et virtuelt objekt.

Dette kalles okklusjon, og det er et vanskelig problem i forstørret virkelighet. For å gjøre dette fenomenet riktig, trenger HoloLens å kartlegge verden raskt og nøyaktig nok til å kutte personens silhuett ut av det virtuelle bildet. Ellers vil du ha en dybdekonflikt: Stereonsynet ditt vil fortelle deg at det virtuelle objektet ligger bak personen, men det vil bli vist på toppen av dem. Som vi har lært av den virtuelle virkeligheten, forstyrrer disse slags konflikter og ødelegger illusjonen at objektene du samhandler med, er materielle deler av verden.

Demoen går til betydelige lengder for å forhindre dette. Du kan se kameraoperatøren reagere når en av personene på scenen beveger seg mot et virtuelt objekt, beveger seg for å stoppe dem fra overlapping. Hele demoen er grundig koreografert. Å komme seg ut av stolen i den første demonstrasjonen, gjør at fyren på scenen skal gå foran en virtuell robot - og beleilig er kameraet peket andre steder akkurat da.

De ødelegger det bare et par ganger. Under roboten demo, passerer roboten kort foran noen virtuelle prikker på gulvet, og en av presentatørene skrider på dem. I begge tilfeller er det en dybdekonflikt: Du fortsetter å se de virtuelle punktene gjennom de virkelige objektene, noe som betyr at Microsoft ikke har en løsning på dette problemet ennå..

Vi kan se flere bevis på dette i samme demo, når en visualisering vises på hodesettets miljøkart. Hvis du rammer for bilde gjennom det og ser nøye ut, kan du se at kartet er feil på flere måter: Tabellen er på en hevet plattform, som blir en vag bulge i kartet. Roboten er også synlig på kartet, men bare som en liten klump. Kantene på skrivebordet mangler. Du kan trolig klandre disse problemene på den begrensede oppløsningen til Kinect-dybdesensoren i hodesettet. Uansett er det bare ikke nok presisjon her for å korrekt blokkere virtuelle objekter.

La oss være klare her: dette kan være en showstopper. Hensikten med HoloLens er å sømløst kombinere virkelige og virtuelle objekter på en overbevisende måte. Okklusjon er en nødvendig del av illusjonen. Okklusjon er en så kraftig dybdejustering som å legge til en enkelt hvit linje i en video, kan skape en kraftig 3D-effekt av seg selv.

Microsoft er tydelig klar over dette. De viser okklusjon i deres reklamemateriell. Likevel, fra deres demoer ser det ikke ut som om de faktisk kan gjøre det. Hvis Microsoft ikke kan løse dette problemet, har de ikke et produkt. Brukere lever ikke i detaljert koreograferte demoer i tomme hjem. De vil ikke tolerere konstant, nedsenkende gjengivelsesfeil. Jeg er ærlig snill overrasket over at flere av teknologipressen ikke snakker om dette problemet. Jeg er veldig nysgjerrig på om Microsoft har noen planer om å løse dette problemet.

Brukergrensesnitt

Hver gang jeg ser på en video som viser HoloLens brukergrensesnitt, er uttrykket som fortsetter å gå gjennom hodet mitt “Skal vi virkelig gjøre dette igjen?”

Med hver ny dataplatform, både PC og smarttelefoner, går vi gjennom en syklus med dårlig brukergrensesnitt før vi finner ut det. Problemet er at de dårlige brukergrensesnittene er dårlige på nøyaktig samme måter, og de er dårlige på den måten at HoloLens brukergrensesnitt er dårlig. Jeg ønsker, for en gang kunne vi gjenkjenne mønsteret og hoppe over til den gode delen. Her er hva HoloLens (og hver ny plattform) gjør feil:

• For det første prøver de å gjenskape gamle paradigmer, i stedet for å skape nye. Tenk på de gamle Treo-smarttelefonene som ble bygget rundt et fysisk tastatur og en musemulerende stylus. HoloLens er akkurat det samme, bruker hodet til å emulere en mus, og fingeren din klikker. Heck, på et tidspunkt ingeniør “drar” et vindu ved å låse det på hodet hans, noe som Oculus VR Best Practices guide eksplisitt advarer mot. HoloLens er ikke en PC, og det går ikke å jobbe med å prøve å bruke en PC-brukergrensesnitt.
• For det andre blir de innpakket i de skinnende delene av grensesnittet, og skape utsmykkede, ubrukelige fluff. Husker du Clippy? Microsoft Bob? Den faux lær på den gamle iOS notater app? Dette er ubrukelig visuell rot. Den virtuelle hunden og fiskeskålen og roboten er akkurat det samme. Hvor mange ganger må vi gjøre dette før vi innser at minimalisme er den eneste gode ideen?

Mens vi er på den, “hologrammer” seg er et rot visuelt. De kan ikke bestemme om de er rene ruter eller goofy, tegneserieblokker. UI-elementene er altfor store, og krever omfattende bevegelser å bruke, opp til og med fysisk å gå rundt, noe som er dårlig design av mange grunner..

Hvis det virker som om jeg er lei meg over dette, er det fordi det er etterhvert at det er veldig, veldig kult en dag, at det er en overflod av brukergrensesnitt. HoloLens brukergrensesnitt som har blitt vist så langt er et komplett rot, og det er synd. Et godt brukergrensesnitt er forskjellen mellom Treo og iPhone - mellom en IBM mainframe og den opprinnelige mus-og-tastatur-PCen. Det er forskjellen mellom et leketøy for nørder og en verdenskrevende innovasjon.

Formfaktor

Det er en stor del gode nyheter. Microsoft brakt “hundrevis” av HoloLens-enheter til showet, og viser dem til deltakerne. Den siste gangen Microsoft gjorde demoer, ble folk festet til store kablede headset. Hodetelefonene som ble brukt på scenen var rekvisitter som bare kunne vise et svart og hvitt bilde med lav oppløsning. Imidlertid sier presentatøren klart at headsettet er “liker bare de du så på scenen i dag.” Microsoft har med andre ord lykkes med å miniatyrisere HoloLens-maskinvaren for å passe inn i en bærbar formfaktor, som er gode nyheter.

Her er en utvikleres opplevelse med den nye maskinvaren:

“Jeg gikk 'på byggeplassen' og de overlappte tegningene på veggen. Da kunne jeg se hvordan en dør ville se ut og legge merke til at en stråle var i veien. Vi flyttet døren bort og la til et lag med elektrisk og VVS, og så at et rør var nå i veien. Jeg stirret og air clicked 'på røret og dro en stemme notat for rørleggeren å flytte røret bort.

Da kom jeg tilbake i rollen som rørlegger og hentet notatet mitt (det hengde der), stirret og klikket og hørte min egen innspilt stemme.

Bruk av enheten trenger litt vant til. Det var ikke super godt justert og presset litt på nesen min. Men jeg tror jeg kan tilpasse det bedre i tide.

Det holografiske området er mindre omfattende enn jeg trodde. Det er et rektangel foran øynene dine, men hvis du har en god sidesyn (som jeg har), er det litt foruroligende fordi hologrammet blir beskåret når du beveger hodet.

Alt i alt er det ekstremt imponerende, og jeg kan ikke vente med å utvikle for det.”

Mens forfatteren merker at enheten fortsatt har et lavt synsfelt, synes han imponert over maskinvaren generelt, som er et lovende tegn. Til slutt vil AR være en kraftigere og mer fleksibel erstatning for VR - som allerede er en fantastisk teknologi. Hvorfor Virtual Reality Technology vil blåse deg i 5 år Hvorfor Virtual Reality Technology vil blåse deg i 5 år Fremtiden for virtuell virkelighet inkluderer hodet, øye- og uttrykssporing, simulert berøring og mye mer. Disse fantastiske teknologiene vil være tilgjengelige for deg på 5 år eller mindre. Les mer . Det store spørsmålet er - hvor langt er vi?

Utviklerstøtte

Selv om det ikke ble nevnt i kunngjøringsvideoen, annonserte Microsoft også at via deres partnerskap med Unity vil det også være full støtte til HoloLens i Unity, et av de vanligste verktøyene som brukes til indie spillutvikling. Støtten vil inkludere evnen til å gjengi gjennom HoloLens, og å få innspill fra enheten på ulike måter. Både Unity Free og Unity Pro vil ha gratis HoloLens-støtte. Selv om integrasjonen ikke er fullført ennå, gir Microsoft allerede korte kurs på Build-konferansen ved hjelp av prototypen Unity-integrasjoner, for å gi utviklere en første titt på hva koding for AR vil være som.

Dette er en velkommen men ikke et overraskende trekk. Enhver ny plattform bor eller dør på kvaliteten på lanseringsinnholdet, og HoloLens vil ikke være noe unntak. Dessuten har Microsoft alltid vært forpliktet til utviklerrelasjoner.

Prototype Feber

HoloLens tommer sakte mot kommersiell virkelighet. Jeg opprettholder dype forbehold om noen av begrensningene til maskinvaren, men enheten er ubestridelig kul 8 Real-World-bruksområder for Microsoft HoloLens 8 Real-World-bruksområder for Microsoft HoloLens Microsofts HoloLens er kult, men hva vil du faktisk bruke den til? Vi løper ned de mest spennende mulighetene. Les mer, og noe som det vil en dag være veldig nyttig. Er du glade for HoloLens? Fikk du sjansen til å prøve en på konferansen? Vil bare ha en virtuell fiskeskål? Gi oss beskjed i kommentarene!

Utforsk mer om: Microsoft, Virtual Reality, Windows 10.