Waarom NASA de HoloLens van Microsoft in de ruimte wil

De explosie in juni van de SpaceX-raket die op weg was naar het internationale ruimtestation ISS voelde als een klap in zijn maag voor Jeff Norris, de projectmanager voor twee HoloLens-projecten waaraan NASA werkt in zijn Jet Propulsion Laboratory (JPL) in Pasadena, Californië. Onder de items aan boord bevonden zich twee HoloLens-headsets: de aanstaande augmented-reality-gadgets van Microsoft.

Astronaut Luca Parmitano gebruikt HoloLens op de onderwaterbasis Aquarius Reef, die zich onder de Florida Keys bevindt.

Maar binnen een paar weken, zegt Norris, hadden zijn team bij NASA en zijn tegenhangers bij Microsoft nieuwe HoloLens-hardware die ze aan het certificeren waren voor lancering in de ruimte. Dat is nu gepland op 3 december als onderdeel van een commerciële vrachtlancering door het ruimtevaartbedrijf Orbital Sciences om het ruimtestation te bevoorraden.

Hier op aarde kunnen augmented-reality-apparaten uiteindelijk worden gebruikt voor een scala aan dingen, zoals het spelen van games die digitale 3D-wezens met de realiteit vermengen of praten met externe vrienden alsof ze in je woonkamer zijn. Maar NASA ziet een aantal praktische - en mogelijk tijdbesparende - toepassingen voor de technologie in de ruimte.

NASA hoopt HoloLens aan boord van het ruimtestation te gebruiken, zodat astronauten kunnen samenwerken met een externe expert die kan zien wat de astronaut ziet en kan helpen met onbekende taken. Het apparaat kan ook fungeren als een augmented-reality-instructiehandleiding die bijvoorbeeld 3D-beelden gebruikt om een ​​astronaut te laten zien waar hij wat apparatuur moet plaatsen of welke hendel hij moet draaien. (Microsoft CEO Satya Nadella zei onlangs in een interview dat HoloLens binnen een jaar beschikbaar zal zijn voor ontwikkelaars; de timing van een consumentenrelease is nog onbekend.)

Eind juli en begin augustus probeerden NASA-astronauten HoloLens te gebruiken om te helpen met verschillende taken op de Aquarius Reef Base.

Norris, die ook de leider is van de Ops Lab bij JPL, zegt dat NASA ook werkt aan andere toepassingen voor HoloLens, zoals het gebruik van augmented reality voor voorraadbeheer. Blijkbaar is het op het ruimtestation een grote uitdaging om bij te houden waar dingen zijn en hoe ze te vinden, ook al hebben objecten streepjescodes en zijn ze georganiseerd met een database. NASA heeft een prototype gemaakt van een app die kan worden gebruikt om een ​​object te herkennen en de HoloLens-drager een pad te laten zien dat leidt naar waar het object moet worden opgeslagen, zegt Norris.

Om een ​​idee te krijgen van hoe het zal zijn om HoloLens op het ruimtestation te gebruiken, experimenteerde NASA in de tussentijd met HoloLens op de Waterman onderwater onderzoeksstation voor de kust van Key Largo, Florida, eind juli en begin augustus. Astronauten gebruikten het apparaat voor taken zoals het controleren van ademhalingsapparatuur voor noodgevallen door een reeks stappen te doorlopen, variërend van het draaien van kleppen tot het vinden en aansluiten van apparatuur, en het opzetten van apparatuur om een ​​onderzeese robot te ondersteunen.

In beide gevallen hielp een expert die in een afstandsbedieningscentrum op het droge zat met behulp van een Skype-programma dat Microsoft voor HoloLens had gebouwd (zie Reality Check: HoloLens en Magic Leap vergelijken) waarin een naar voren gerichte camera op de HoloLens de expert liet zien wat de astronaut zag. Indien nodig kan de externe expert in de lucht tekenen om te wijzen op dingen die de astronauten zouden zien met de HoloLens-headset (de hele tijd konden de astronauten ook een zwevende video van de expert voor hun gezicht zien). Norris denkt dat de taak vele malen zo lang zou hebben geduurd als deze eenvoudig was omschreven als een te volgen procedure.

Hoewel hij denkt dat het nuttig kan zijn, zegt Norris ook dat er enorme uitdagingen zijn bij het bouwen van augmented-reality-applicaties, zoals uitzoeken hoe een applicatiemenu eruit moet zien en hoe de gebruiker ermee moet omgaan als het niet wordt weergegeven op een laptop of smartphone scherm.

De regels zijn anders als je nu informatie over een persoon geeft, zegt hij.

zich verstoppen