211service.com
Camera laat blinde mensen navigeren met gebaren
Eelke Folmer en Vinitha Khambadkar denken dat blinde mensen zonder hun witte wandelstok kunnen en in plaats daarvan navigeren met een camera om hun nek die gesproken begeleiding geeft als reactie op handgebaren.
Folmer en Khambadkar, onderzoekers van de University of Nevada, presenteerden de technologie vorige week op het ACM Symposium on User Interface Software and Technology. Bekend als de gebareninterface voor ruimtelijke waarneming op afstand, die ze afkorten als KERN , maakt het systeem gebruik van een Microsoft Kinect-sensor om objecten in zijn gezichtsveld te analyseren en te identificeren. Met GIST kun je informatie uit je omgeving halen, zegt Folmer.
Het onderzoek in Nevada is gebaseerd op de ideeën van MIT's Sixth Sense-project , een augmented reality-inspanning waarbij een draagbaar apparaat informatie op de fysieke wereld projecteert en de gebruiker ermee laat communiceren door te zwaaien, te wijzen of andere handgebaren te maken. Maar in tegenstelling hiermee verzamelt GIST gegevens als reactie op handgebaren als een manier om de sterk verminderde ruimtelijke waarneming van blinden te vergroten.
Als iemand die GIST draagt bijvoorbeeld een V-teken maakt met de wijs- en middelvinger, zal het apparaat de dominante kleur in het ingekapselde gebied identificeren. Als de gebruiker een gesloten vuist uitsteekt, identificeert het systeem of een persoon in die richting is en hoe ver hij of zij is. (Zie de korte demonstratievideo van de onderzoekers hieronder.)
Gebaren zijn echter niet bedoeld als het enige middel voor interactie met GIST, dankzij het vermogen van de Kinect om objecten, gezichten en spraak te herkennen. Zoals Folmer uitlegt: je zegt tegen de sensor zoiets als 'Dit is mijn kopje'. Je zet het op tafel en zegt: 'Hé, waar is mijn kopje?' Het zal zeggen dat het recht voor je staat. De volgende truc is uitzoeken hoe u het object kunt blijven volgen wanneer het verder weg of achter de gebruiker beweegt.
De onderzoekers zijn ook van plan om te zien of GIST het zijn dragers effectief kan vertellen wie staat voor hen, door de gezichten van mensen die het detecteert te vergelijken met een kleine database die de gebruiker zou kunnen opzetten met spraakopdrachten. Als dat niet werkt, zegt Folmer, kunnen de onderzoekers een systeem proberen dat mensen identificeert op basis van hun lichaamsvorm.
GIST zal binnenkort profiteren van de nieuwe Kinect 2.0-sensor, die de tracking van het origineel verbetert en nauwkeurige vingerherkenning mogelijk maakt, in tegenstelling tot alleen handen. Het voorbehoud is echter dat de nieuwe Kinect groter en omvangrijker is, waardoor hij niet geschikt is voor langdurig dragen rond de nek.
Maar Folmer gelooft dat het slechts een kwestie van tijd is voordat er Kinect-achtige sensoren zijn die klein genoeg zijn om in smartphones te passen - in feite is het proces al aan de gang (zie Dieptegevoelige camera's gaan naar mobiele apparaten). En over het algemeen is Folmer van mening dat naarmate reguliere computerapparatuur kleiner wordt, ze zeer nuttig zullen zijn voor slechtziende mensen, omdat dergelijke apparaten zullen vertrouwen op interfaces, zoals spraak, die blinden al tientallen jaren gebruiken.