De ogen en oren van een smartphone gebruiken om elke beweging vast te leggen

Velen van ons registreren al de plaatsen waar we heen gaan en de dingen die we doen door onze smartphone te gebruiken om ijverig foto's en video's te maken en om sociale media-accounts bij te werken. Een bedrijf genaamd ARO bouwt technologie die automatisch een meer uitgebreide, automatische registratie van uw leven verzamelt.





ARO zit achter een app genaamd Saga dat automatisch elke plaats registreert waar een persoon naartoe gaat. Nu testen de technici van ARO manieren om de barometer, camera's en microfoons in een apparaat te gebruiken, samen met de locatiesensoren, om erachter te komen wat iemand aan het doen is en waar. Die aanpak zou in de late zomer of vroege herfst in de Saga-app moeten debuteren.

De huidige versie van Saga, beschikbaar voor Apple- en Android-telefoons, registreert automatisch de plaatsen die een persoon bezoekt; het kan ook gegevens verzamelen over dagelijkse activiteiten van andere diensten, waaronder de apps voor het volgen van oefeningen FitBit en RunKeeper, en kan updates ophalen van sociale-media-accounts zoals Facebook, Instagram en Twitter. Als de app een tijdje op een telefoon draait, produceert hij infographics over het leven van de gebruiker; bijvoorbeeld het in kaart brengen van de variatie in tijdstippen waarop hij of zij 's ochtends naar het werk vertrekt.

Software die op de servers van ARO draait, creëert en onderhoudt een model van de typische bewegingen van elke gebruiker. Die modellen versterken Saga's levensoverzichtelijke functies en helpen de app om een ​​persoon de hele dag te volgen zonder dat sensoren altijd aan moeten staan, wat te veel batterijduur zou kosten.



Als ik weet dat je negen uur op je werk zit, kunnen we ons incassobeleid uitschakelen om zo min mogelijk stroom te verbruiken, zegt Andy Hickl, CEO van ARO. Saga wordt wakker en controleert de locatie van een persoon als bijvoorbeeld de versnellingsmeter van een telefoon suggereert dat hij of zij onderweg is; en er kan bevestiging zijn van andere aanwijzingen, zoals de mix van wifi-netwerken binnen het bereik van de telefoon. Hickl zegt dat Saga doorgaans ongeveer 1 procent van de batterij van een apparaat verbruikt, aanzienlijk minder dan veel populaire apps voor e-mail, kaarten of sociale netwerken.

Dat verbruik is laag genoeg, zegt Hickl, dat Saga het zich kan veroorloven om de informatie die het verzamelt op te voeren door toegang te krijgen tot extra telefoonsensoren. Hij zegt dat Saga zo nu en dan gegevens van de barometer, camera's en microfoons van een telefoon kan bemonsteren, zoals wanneer iemand een vergaderruimte binnenliep voor een vergadering of Starbucks bezocht, alleen of met gezelschap.

De Android-versie van Saga is onlangs begonnen met het gebruik van de barometer die in veel smartphones aanwezig is om locaties dicht bij elkaar te onderscheiden. Drukveranderingen kunnen worden gebruikt om vergelijkbare plaatsen beter te onderscheiden, zegt Ian Clifton, die de ontwikkeling van de Android-versie van ARO leidt. Dat kan de eerste verdieping zijn versus de derde verdieping in hetzelfde gebouw, maar ook in een voertuig versus daarbuiten, zelfs in dezelfde fysieke ruimte.



ARO test intern versies van Saga die licht en geluid uit de omgeving van een persoon proeven. Clifton zegt dat het gebruik van de microfoon van een telefoon om korte akoestische vingerafdrukken van verschillende plaatsen te verzamelen, een waardevol aanvullend signaal van de locatie kan zijn en gevolgtrekkingen kan maken over wat een persoon aan het doen is. Soms weten we niet zeker of je in Starbucks zit of in de bar ernaast, zegt Clifton. Met akoestische vingerafdrukken, zelfs als de metingen van de [locatie]sensor vergelijkbaar zijn, kunnen we dat onderscheiden.

Af en toe het licht rond een telefoon met behulp van de camera bemonsteren, geeft een ander soort extra signaal van iemands activiteit. Als je van omgevingslicht naar natuurlijk licht gaat, zou dat voor ons zeggen dat je context is veranderd, zegt Hickl. Met behulp van deze informatie moet het voor Saga mogelijk zijn om het verschil te leren tussen bijvoorbeeld de verschillende ruimtes van een kantoor.

Uiteindelijk zal het bemonsteren van licht-, geluid- en drukgegevens Saga's machine learning-modellen in staat stellen om meer details van het leven van een gebruiker in te vullen, zegt Hickl. [Als] ik vandaag naar huis ga en daar 12 uur doorbreng, naar Saga die eruitziet als een muur van niets, zegt hij, en hij merkt op dat Saga geluids- of lichtsignalen kan gebruiken om af te leiden wanneer hij in die tijd thuis bijvoorbeeld tv aan het kijken was , spelen met zijn kinderen of eten.



Andrew Campbell , die onderzoek leidt naar smartphonedetectie aan het Dartmouth College, zegt dat het toevoegen van meer gedetailleerde, automatische functies voor levensregistratie van cruciaal belang is voor Saga of een vergelijkbare app om een ​​wijdverbreide impact te hebben. Automatische detectie verlicht de gebruiker van de last van het invoeren van veel gegevens, zegt hij. Automatische en continue detectie-apps die gebruikersinteractie minimaliseren, zullen waarschijnlijk winnen.

Campbell zegt dat automatisch loggen, in combinatie met machine learning, apps ook in staat zou moeten stellen om meer te weten te komen over de gezondheid en het welzijn van gebruikers. Hij begon onlangs met het analyseren van gegevens van een proef waarin 60 studenten een door hem ontwikkelde app voor levensregistratie gebruikten, genaamd Bioritme . Het gebruikt verschillende trucs voor het verzamelen van gegevens, waaronder het luisteren naar stemmen in de buurt om te bepalen wanneer een leerling in gesprek is. We kunnen veel interessante patronen zien die verband houden met klasprestaties, persoonlijkheid, stress, gezelligheid en gezondheid, zegt Campbell. Dit kan zich vertalen in elke prestatiesituatie op de werkplek, zoals een startup, ziekenhuis, groot bedrijf of thuis.

Het project van Campbell kan bepalen hoe hij zijn cursussen geeft, maar het hoeft geen geld op te leveren. ARO , gefinancierd door Microsoft-medeoprichter Paul Allen, moet uiteindelijk het loggen van het leven lonend maken. Hickl zegt dat hij al is begonnen met het verhuren van een deel van de technologie van ARO aan andere bedrijven die de locatie of activiteiten van hun gebruikers willen kunnen identificeren. Geaggregeerde gegevens van Saga-gebruikers zouden ook waardevol moeten zijn, zegt hij.

Nu krijgen we in sommige gebieden een kritieke massa gebruikers en kunnen we trends spotten, zegt hij. Het Amerikaanse nationale voetbalteam was in Seattle en we konden zien waar de activiteit in de stad oplaaide. Hickl zegt dat de gegevens van dat evenement stadsautoriteiten of bedrijven kunnen helpen bij het plannen van toekomstige voetbalevenementen in Seattle of elders. Hij voegt eraan toe dat Saga vergelijkbare inzichten zou kunnen bieden in vele andere anders onzichtbare patronen van het dagelijks leven.

zich verstoppen