Het plan van Microsoft om het tijdperk van gebarencontrole tot stand te brengen





Hoewel de meeste krantenkoppen over Microsoft dit najaar gaan over het nieuwe besturingssysteem, Windows 8, en de nieuwe Surface-tablet, werkt het bedrijf ook hard aan een langetermijninspanning om de manier waarop we omgaan met bestaande computers opnieuw uit te vinden. Het bedrijf wil het tegenwoordig net zo gewoon maken om met je armen naar een computer te zwaaien of tegen een computer te praten als om naar een muis of aanraakscherm te reiken.

Dat is het doel van een programma genaamd Kinect voor Windows , dat tot doel heeft het enorm succesvolle gamingaccessoire Kinect overal te plaatsen waar het alomtegenwoordige besturingssysteem van Microsoft wordt gevonden. Het is ook ontworpen om computers op nieuwe manieren te kunnen gebruiken, bijvoorbeeld door chirurgen die halverwege de operatie geen toetsenbord willen aanraken met gesteriliseerde handen.

We proberen [software]-ontwikkelaars aan te moedigen een geheel nieuwe klasse van apps te maken die worden bestuurd door gebaren en spraak, zegt Peter Zatloukal, hoofd engineering voor het Kinect voor Windows-programma.



Het duurde niet lang nadat de Kinect voor het eerst werd gelanceerd dat software-ingenieurs het opnieuw begonnen te gebruiken voor ander gebruik, zoals robotnavigatie of het besturen van een webbrowser (zie Hackers brengen de Kinect naar een nieuw niveau). Kinect voor Windows is bedoeld om dat enthousiasme te benutten en de technologie wijdverbreid te maken.

Zatloukal zegt dat het resultaat vergelijkbaar zal zijn met andere grote verschuivingen in de manier waarop we computers besturen. We gebruikten aanvankelijk toetsenborden, toen waren de muis en GUI's een grote innovatie, nu is aanraking een groot deel van het leven van mensen, zegt hij. De voortgang zal nu zijn naar stem en gebaar. Gezondheidszorg, productie en onderwijs zijn allemaal gebieden waar Zatloukal verwacht dat Kinect voor Windows zal slagen. Een conventioneel toetsenbord, muis of touchscreen kan moeilijk te gebruiken zijn in klaslokalen en ziekenhuisafdelingen, of op fabrieksvloeren.

Een Kinect-eenheid gebruikt infrarood- en conventionele camera's om gebaren te volgen en een microfoon om spraakinvoer op te nemen (zie Hack: Microsoft Kinect). Kinect voor Windows-apparatuur ging in februari in de verkoop voor $ 249 en is nu beschikbaar in 32 landen. Eerder deze maand stelde Microsoft de hardware voor het eerst beschikbaar in China, een land met zowel veel potentiële klanten als een flink aantal computerfabrikanten.



Om het platform miljoenen mensen te laten bereiken, heeft Microsoft softwareontwikkelaars nodig om geweldige applicaties te maken. Samen met de hardware biedt het bedrijf een softwareontwikkelaarskit, of SDK, die een reeks kant-en-klare tools biedt, waaronder spraakherkenning en het volgen van lichaamsdelen. Eerder deze maand werd dit uitgebreid om toepassingen mogelijk te maken die objecten en mensen op meer dan vier meter afstand detecteren en het mogelijk maken om software te besturen met een virtuele cursor.

We hebben veel meer gegevens van de sensor ontsloten, zegt Zatloukal. Door bijvoorbeeld infrarood te gebruiken, kunnen uw apps nu in het donker zien. Dat zou een op Kinect gebaseerd systeem in staat kunnen stellen om gebaren te begrijpen terwijl een persoon tv kijkt in een verduisterde kamer.

Zatloukal zal niet praten over hoe Microsoft Kinect voor Windows precies op de markt zal brengen. De hardware wordt momenteel alleen aangeboden aan softwareontwikkelaars, maar als er veel programma's beschikbaar komen, kan Microsoft deze rechtstreeks aan consumenten aanbieden, of computerfabrikanten aanmoedigen om het te bundelen met desktops, laptops of monitoren in plaats van een gewone webcam.



Enkele grote bedrijven, waaronder Bloomingdale's en Nissan, werken samen met Microsoft om mogelijke toepassingen te testen. Nissan heeft een gebarengestuurd systeem voor dealers geïntroduceerd waarmee potentiële kopers in een virtuele versie van een nieuwe auto kunnen kijken. Ondertussen verschijnen er startups die systemen verkopen op basis van Kinect voor Windows (zie Maak kennis met de wendbare interface van de toekomst).

Een dergelijke startup is GestSure , gevestigd in Seattle, dat een product verkoopt op basis van Kinect voor Windows waarmee chirurgen gebaren kunnen gebruiken om een ​​computer met medische beelden te besturen. Hoewel het verwijzen naar scans en andere afbeeldingen cruciaal is in de operatiekamer, kunnen chirurgen geen computer gebruiken zonder een niet-gesteriliseerde controller aan te raken en opnieuw te moeten schrobben, of een verpleegster te vragen de computer voor hen te bedienen. Beide opties verspillen kostbare tijd, zegt Jamie Tremaine, medeoprichter en CEO van de startup.

GestSure verkoopt een doos die, eenmaal aangesloten op een operatiekamercomputer, wacht tot een chirurg een specifiek handsignaal geeft en vervolgens de armen van de arts volgt om de cursor te kunnen besturen. Als er geen belemmering is om naar afbeeldingen te verwijzen, controleren chirurgen [ze] veel meer, zegt Tremaine.



Tremaine zegt dat het vermogen van de Kinect-hardware om diepte waar te nemen het gemakkelijker maakt om objecten te herkennen en te volgen, iets wat heel uitdagend is met een gewone camera. Het overtreft zelfs stemherkenning, zegt hij. Spraakherkenning is 95 tot 98 procent nauwkeurig, dus een op de 50 keer zal het niet werken, zegt hij. Dit werkt als een hulpmiddel: het zal elke keer voor u werken.

Andere startups die producten rond Kinect voor Windows bouwen, zijn onder meer: Niet betreden , die het gebruikt om mensen te helpen met fysieke revalidatie na een beroerte. Gebruikers kunnen thuis oefeningen doornemen terwijl hun computer nauwlettend toekijkt en feedback geeft. Een ander bedrijf, Freak'n Genius , biedt op gebaren gebaseerde animatiesoftware.

Mark Bolas , een universitair hoofddocent en directeur van het Mixed Reality Lab aan de University of Southern California, zegt dat de technologie in Kinect voor Windows kan helpen om het gebruik van computers natuurlijker te maken. Als we tegenwoordig een computer gebruiken, zien we ons lichaam als een vingertop of hoogstens twee vingertoppen, zegt hij. Maar mensen zijn geëvolueerd om met hun hele lichaam te communiceren.

De onderzoeksgroep van Bolas experimenteert met het gebruik van Kinect om zeer subtiel gedrag bij te houden, bijvoorbeeld door het rijzen en dalen van de borstkas van een persoon te meten om de ademhalingsfrequentie te meten. Het is een goede cue voor stress en handig voor teleconferenties, zegt hij.

Door een indicatie van iemands ademhalingsfrequentie weer te geven tijdens een videogesprek, kunnen anderen een persoon beter begrijpen, zegt hij, en kunnen ze laten zien wanneer ze moeten beginnen met praten zonder te onderbreken. De groep heeft ook geëxperimenteerd met het detecteren van friemelende of verdedigende lichaamstaal, zoals gevouwen armen. De hoop is om de sociale signalen aan te pakken die verloren gaan wanneer videogesprekken de face-to-face communicatie vervangen, zegt Bolas. Vlees is belangrijk, zegt hij, en de Kinect brengt dat naar de computer.

zich verstoppen