211service.com
Kinect verandert elk oppervlak in een touchscreen
Een nieuw prototype kan een notebook transformeren in een notebookcomputer, een muur in een interactief scherm en de palm van je hand in een smartphonescherm. Onderzoekers van Microsoft en Carnegie Mellon University zeggen zelfs dat hun nieuwe, op de schouder gemonteerde apparaat, OmniTouch genaamd, elk oppervlak in de buurt kan veranderen in een ad-hoc interactief touchscreen.
Hands-on scherm: Dankzij een proof-of-concept-systeem kunnen smartphones vrijwel elk oppervlak gebruiken als een op aanraking gebaseerd interactief display.
OmniTouch werkt door het samenbrengen van een miniatuurprojector en een infrarood-dieptecamera, vergelijkbaar met het soort dat wordt gebruikt in de Kinect-gameconsole van Microsoft, om een op de schouder gedragen systeem te creëren dat is ontworpen om te communiceren met mobiele apparaten zoals smartphones, zegt mede-uitvinder Chris Harrison , een postdoctoraal onderzoeker bij Carnegie Mellon's Human-Computer Interaction Institute in Pittsburgh en een voormalig stagiair bij Microsoft Research. In plaats van te vertrouwen op schermen, knoppen of toetsen, controleert het systeem de omgeving van de gebruiker op beschikbare oppervlakken en projecteert het een interactief scherm op een of meer ervan.
OmniTouch doet dit automatisch en gebruikt de diepte-informatie van de camera om een 3D-model van de omgeving te bouwen, zegt Harrison. De camera verwerft diepte-informatie over de scène door een straal infraroodlicht met een patroon uit te zenden en de reflecties te gebruiken om te berekenen waar zich oppervlakken in de kamer bevinden. Dit elimineert de noodzaak voor externe kalibratiemarkeringen. Het systeem herbouwt het model dynamisch terwijl de gebruiker of het oppervlak beweegt - bijvoorbeeld de positie van een hand of de hoek of oriëntatie van een boek - zodat de grootte, vorm en positie van deze projecties overeenkomen met die van de geïmproviseerde weergaveoppervlakken, hij zegt. OmniTouch zoekt uit wat er voor u ligt en past alles erop aan.
Het systeem bewaakt ook de omgeving voor alles wat cilindrisch en ongeveer vingergroot is om te bepalen wanneer de gebruiker ermee communiceert, opnieuw met behulp van diepte-informatie om te bepalen wanneer een vinger of vingers contact maken met een oppervlak. Hierdoor kunnen gebruikers met willekeurige oppervlakken communiceren, net zoals ze zouden doen met een aanraakscherm, zegt Harrison. Evenzo kunnen objecten en pictogrammen op de ad-hocschermen worden geveegd en geknepen om te scrollen en zoomen, net zoals op een traditioneel aanraakscherm. In één demonstratiekunsttoepassing gebruikte OmniTouch bijvoorbeeld een nabijgelegen muur of tafel als canvas en de palm van de hand van de gebruiker als kleurenpalet.
De op de schouder gemonteerde opstelling is volkomen onpraktisch, geeft toe Hrvoje Benko , een onderzoeker in de Natural Interaction Research-groep bij Microsoft Research in Redmond, Washington, die ook aan het project werkte, samen met collega Andrew Wilson . Maar het is niet waar je hem monteert die telt, zegt hij. De belangrijkste motivatie was om dit idee om elk beschikbaar oppervlak in een interactief oppervlak te veranderen, door te drukken. Alle componenten die in OmniTouch worden gebruikt, zijn van de plank en worden steeds kleiner. Dus ik denk niet dat we er zo ver van verwijderd zijn dat er een hanger van wordt gemaakt of aan een bril wordt bevestigd, zegt Benko.
Duncan Brumby , een onderzoeker aan het University College London Interaction Center, in Engeland, noemt OmniTouch een leuke en nieuwe vorm van interactie. De schermformaten van mobiele apparaten kunnen beperkend zijn, zegt hij. Er is een groeiende interesse in dit gebied om alomtegenwoordige, immateriële displays ingebed in de omgeving te hebben, zegt hij. En hoewel nieuwe generaties smartphones over het algemeen steeds betere beeldschermen hebben, denkt Brumby dat gebruikers bereid zullen zijn om geprojecteerde beelden van lagere kwaliteit te accepteren, met de juiste toepassingen.
Welke toepassingen precies zijn, is moeilijk te voorspellen, zegt Harrison. Het is een activerende technologie, net als touchscreens. Touchscreens zelf zijn niet zo spannend, zegt hij - het is wat je ermee doet. Maar het team heeft verschillende voorbeeldtoepassingen gebouwd; één stelt gebruikers in staat virtueel aantekeningen te maken bij een fysiek document, en een andere bevat handgebaren zodat OmniTouch kan afleiden of de weergegeven informatie openbaar moet worden gemaakt of privé moet worden gehouden.
Het gebruik van dergelijke oppervlakken is niet nieuw, zegt Pranav Mistry een onderzoeker bij MIT's Media Labs. Inderdaad, twee jaar geleden demonstreerde Mistry een systeem genaamd Zesde zintuig , die displays van een hanger op nabijgelegen oppervlakken projecteerde. In de originele versie gebruikte Mistry markeringen om de vingers van de gebruiker te detecteren, maar hij zegt dat hij sindsdien ook een dieptecamera gebruikt. De nieuwigheid hier [met OmniTouch] is de technologie, zegt hij. Het nieuwe is de nauwkeurigheid en het robuuster maken.
Het OmniTouch-team heeft het systeem inderdaad op 12 proefpersonen getest om te zien hoe het zich verhoudt tot traditionele aanraakschermen. Deze week presenteren hun bevindingen bij de ACM Symposium over Software en technologie voor gebruikersinterface in Santa Barbara toonde het team aan dat het mogelijk was om ongelooflijk kleine knoppen, slechts 16,2 millimeter groot, weer te geven voordat gebruikers er moeite mee hadden erop te klikken. Bij een traditioneel touchscreen ligt de ondergrens meestal rond de 15 millimeter, zegt Harrison.