Maak kennis met de wendbare interface van de toekomst

Microsoft's Kinect, een 3D-camera en software voor gaming, heeft sinds de lancering in 2010 een grote impact gemaakt. In de eerste twee maanden dat het product op de markt was, werden acht miljoen apparaten verkocht toen mensen schreeuwden om videogames te spelen met hun hele lichaam in in plaats van handcontrollers. Maar hoewel Kinect geweldig is voor gamen op het hele lichaam, is het niet handig als interface voor persoonlijk computergebruik, deels omdat de algoritmen hand- en vingerbewegingen niet snel en nauwkeurig kunnen detecteren.





Vinger muis: 3Gear gebruikt dieptegevoelige camera's om vingerbewegingen te volgen.

Nu heeft een in San Francisco gevestigde startup genaamd 3Gear een gebareninterface ontwikkeld die snel bewegende vingers kan volgen. Vandaag zal het bedrijf een vroege versie van zijn software vrijgeven aan programmeurs. De opstelling vereist twee 3D-camera's die rechts en links boven de gebruiker zijn geplaatst.

De hoop is dat ontwikkelaars nuttige applicaties zullen maken die het bereik van de hand-tracking-algoritmen van 3Gear zullen vergroten. Uiteindelijk, zegt Robert Wang, medeoprichter van het bedrijf, zou de technologie van 3Gear kunnen worden gebruikt door ingenieurs om 3D-objecten te maken, door gamers die precisiespel willen, door chirurgen die 3D-gegevens moeten manipuleren tijdens operaties, en door iedereen die wil een computer om haar bevelen uit te voeren met een zwaai van de vinger.



Een probleem met gebareninterfaces, evenals desktopschermen met aanraakschermen, is dat ze oncomfortabel in het gebruik kunnen zijn. Ze leiden soms tot een pijn die gorilla-arm wordt genoemd. Als gevolg hiervan, zegt Wang, richtte 3Gear zich op het praktisch en comfortabel maken van de gebareninterface.

Als ik aan mijn bureau wil werken en gebaren wil gebruiken, kan ik dat niet de hele dag doen, zegt hij. Het is niet precies en het is niet ergonomisch.

De sleutel, zegt Wang, is om twee 3D-camera's boven de handen te gebruiken. Ze zijn momenteel gemonteerd op een metalen frame, maar kunnen uiteindelijk op een monitor worden geklikt. Een weergave van bovenaf betekent dat handen op een bureau kunnen rusten of op een toetsenbord kunnen blijven. (Hoewel de 3Gear-softwareontwikkelingskit gratis is tijdens de openbare bèta, die duurt tot 30 november, moeten ontwikkelaars hun eigen hardware aanschaffen, inclusief camera's en frame.)



Andere projecten hebben aanraakschermen vervangen door sensoren die op het bureau zitten en naar het scherm wijzen, waarbij de gebruiker nog steeds naar voren moet reiken, weg van het toetsenbord, zegt Daniel wigdor , hoogleraar computerwetenschappen aan de Universiteit van Toronto en auteur van Dappere GROTE wereld , een boek over aanraak- en gebareninterfaces. Deze oplossing probeert dat aan te pakken.

3Gear staat niet alleen in zijn wens om de fijne kneepjes van het volgen van gebaren aan te pakken. Eerder dit jaar bracht Microsoft een update uit waarmee mensen die Kinect voor Windows-software ontwikkelen, de positie van het hoofd, de wenkbrauwlocatie en de vorm van een mond konden volgen. Bovendien, Israëlische startup Omek , Belgische startup SoftKinetic , en een startup uit San Francisco genaamd Sprongbeweging - die beweert dat zijn kleine systeem met één camera bewegingen tot op een honderdste van een millimeter zal volgen - strijden allemaal om een ​​positie in de jonge gebaren-interfacemarkt.



Handtracking is een moeilijk, al lang bestaand probleem, zegt Patrick Baudisch , hoogleraar computerwetenschappen aan het Hasso-Plattner Instituut in Potsdam, Duitsland. Hij merkt op dat er een geschiedenis is van het gebruik van omslachtige handschoenen of kleurmarkeringen op vingers om dit soort tracking te bereiken. Een interface zonder deze extra's is zeer wenselijk, zegt Baudisch.

Het systeem van 3Gear maakt gebruik van twee dieptecamera's (hetzelfde type dat wordt gebruikt met Kinect) die 30 frames per seconde vastleggen. De positie van de handen en vingers van een gebruiker wordt gekoppeld aan een database van 30.000 mogelijke hand- en vingerconfiguraties. Het proces van het identificeren en matchen met de database - een bekende benadering op het gebied van gebarenherkenning - vindt plaats binnen 33 milliseconden, zegt Wang, dus het voelt alsof de computer bijna onmiddellijk een vingerbeweging van zelfs een millimeter kan zien en erop kan reageren.

Zelfs met de toenemende belangstelling voor gebarenherkenning voor handen en vingers, kan het even duren voordat niet-gamers en niet-ingenieurs de technologie op grote schaal toepassen.



In het scenario voor desktopruimte en productiviteit is het een veel uitdagendere verkoop, merkt op Johnny Lee , die eerder bij Microsoft werkte in het Kinect-team en nu bij Google werkt. Je moet het opnemen tegen de muis, het toetsenbord en het aanraakscherm voor je. Toch, zegt Lee, is hij verheugd om het soort toepassingen te zien dat zal verschijnen als dieptecamera's in prijs dalen, algoritmen voor 3D-detectie blijven verbeteren en meer ontwikkelaars gebaren zien als een handige manier om met machines te communiceren.

zich verstoppen