Bedien uw smartphone met uw ogen

In een poging om eye-tracking goedkoop, compact en nauwkeurig genoeg te maken om in smartphones te worden opgenomen, is een groep onderzoekers bezig met het crowdsourcing van het verzamelen van blikinformatie en deze te gebruiken om mobiele software te leren hoe je in realtime kunt achterhalen waar je naar kijkt. .





Onderzoekers van het MIT, de Universiteit van Georgia en het Duitse Max Planck Instituut voor Informatica werken aan het project, en ze zeggen dat ze tot nu toe software hebben kunnen trainen om te identificeren waar een persoon kijkt met een nauwkeurigheid van ongeveer een centimeter op een mobiele telefoon en 1,7 centimeter op een tablet.

Dit is niet zo nauwkeurig, vooral als je kijkt naar de totale grootte van je smartphonescherm. Het is nog steeds niet exact genoeg om te gebruiken voor consumententoepassingen, zegt Aditya Khosla, een afgestudeerde student aan het MIT en co-auteur van een papier over het werk dat werd gepresenteerd op een computervisie conferentie deze week.

Om hen te helpen eye-tracking-software te maken die op uw smartphone draait, hebben onderzoekers eerst een app gemaakt die de blikgegevens van gebruikers verzamelt.



Maar hij gelooft dat de nauwkeurigheid van het systeem zal verbeteren met meer gegevens. Als dat zo is, kan eye-tracking veel wijdverspreider en nuttiger worden; meestal was het duur en vereiste hardware waardoor het lastig was om de mogelijkheid toe te voegen aan gadgets zoals telefoons en tablets. En de technologie kan handig zijn als een manier om u games te laten spelen of uw smartphone te laten navigeren zonder te hoeven tikken of vegen.

De onderzoekers begonnen met het bouwen van een iPhone-app genaamd Blik vastleggen die gegevens verzamelde over hoe mensen naar hun telefoons kijken in verschillende omgevingen buiten de grenzen van een laboratorium. De blik van gebruikers werd opgenomen met de camera aan de voorkant van de telefoon, terwijl ze pulserende stippen op een smartphonescherm te zien kregen. Om er zeker van te zijn dat ze opletten, kregen ze een stip te zien met een L of R erin, en moesten ze als reactie daarop op de linker- of rijkant van het scherm tikken.

GazeCapture-informatie werd vervolgens gebruikt om software genaamd iTracker te trainen, die ook op een iPhone kan draaien. De camera van de handset legt uw gezicht vast en de software houdt rekening met factoren zoals de positie en richting van uw hoofd en ogen om erachter te komen waar uw blik op het scherm is gericht.



Tot nu toe hebben ongeveer 1.500 mensen de GazeCapture-app gebruikt, zegt Khosla, en hij denkt dat als de onderzoekers gegevens van 10.000 mensen kunnen krijgen, ze het foutenpercentage van iTracker kunnen terugbrengen tot een halve centimeter, wat goed genoeg zou moeten zijn voor een bereik van eye-tracking toepassingen.

Khosla hoopt dat het met name kan worden gebruikt voor medische diagnoses; sommige onderzoeken hebben overwogen hoe oogbewegingen kunnen worden gebruikt om aandoeningen, waaronder hersenschudding, te diagnosticeren.

Andrew Duchowski , een professor aan de Clemson University die eye-tracking bestudeert, denkt dat iTracker enorm nuttig kan zijn als de onderzoekers het goed kunnen laten werken op mobiele apparaten, hoewel hij waarschuwt dat het ook snel moet werken en niet te veel batterijduur zal verbruiken.



Hij denkt niet dat het mogelijk is om er nauwkeurigheid op pixelniveau uit te halen, maar hij zegt dat het nog steeds behoorlijk goed kan zijn.

zich verstoppen