211service.com
App detecteert objecten voor slechtzienden
Terwijl ik op een recente ochtend door mijn kantoor liep, vertelde een vrouwelijke stem op mijn iPhone de objecten die ik passeerde. Baksteen, muur, telefoon, zei ze nuchter. De stem stopte toen ik een fiets tegenkwam die aan een aan de muur bevestigd rek hing, en toen luidde, fiets.
De stem maakt deel uit van een gratis app voor beeldherkenning genaamd Aipoly dat probeert het voor mensen met een visuele beperking gemakkelijker te maken om hun omgeving te herkennen. Om het te gebruiken, richt je de camera aan de achterkant van de telefoon op wat je wilt dat het identificeert, en Aipoly zal spreken wat het ziet (of in ieder geval wat het denkt te zien) en de naam van het object op het scherm van de telefoon laat zien. Aipoly draait rechtstreeks op je telefoon, dus het heeft geen internettoegang nodig om te werken, en het kan het ene object na het andere identificeren terwijl je de telefoon verplaatst, zonder dat je van elk ding een foto hoeft te maken.
De makers van Aipoly hopen dat de app nuttig kan zijn voor mensen met ernstige visuele beperkingen, en misschien voor degenen die een nieuwe taal proberen te leren. Ze hopen ook dat het sneller zal zijn dan andere aan beeldherkenning gerelateerde apps die afhankelijk zijn van de hulp van andere mensen, zoals Wees mijn ogen , of waarvoor internet vereist is, zoals TikTapZie .
De app werd begin dit jaar voor de iPhone uitgerold door een in Melbourne gevestigde startup met dezelfde naam. Aipoly-medeoprichter Simon Edwardsson zegt dat het afbeeldingen herkent door gebruik te maken van deep learning, een machinale leertechniek die is geïnspireerd op studies van de hersenen. Het is dezelfde technologie die Facebook gebruikt voor het herkennen van gezichten en Google voor het zoeken naar afbeeldingen.
De app komt erachter wat iets is door een afbeelding op te splitsen in verschillende kenmerken, zoals rondingen, lijnen en patronen (zoals strepen), en gebruikt die functies vervolgens om de waarschijnlijkheid te bepalen dat de afbeelding een specifiek object is.
Aipoly kon me vertellen welke dingen er in overvloed zijn die ik in mijn kantoor kan vinden, hoewel er nog veel werk aan de winkel is. Het kan tot nu toe slechts ongeveer 1.000 objecten herkennen; Edwardsson zegt dat het bedrijf probeert dat aantal op te voeren tot 5.000, hoewel dat nog steeds niet zo veel zou zijn als je bedenkt hoeveel verschillende dingen je elke dag tegenkomt.
En hoewel de app vaak correct was bij het spotten van een object, zelfs als het gedeeltelijk was afgesloten (zoals een koptelefoon om de nek van mijn collega), waren er ook tal van misfires.
De vrouwelijke stem zei bijvoorbeeld Chevrolet, toen het stuur en ten slotte de muis, terwijl de telefoon op mijn computermuis gericht was. En de app bleef een magnetron verkeerd identificeren als AC.
De iPhone-app van Aipoly gebruikt kunstmatige intelligentie om objecten te identificeren terwijl je je telefoon beweegt.
Gebruikers kunnen Aipoly trainen door een correct woord of zin te typen om een object te identificeren dat het fout doet; deze gegevens worden vervolgens geüpload naar de servers van Aipoly en de startup zal om de paar weken beschrijvingen aan Aipoly toevoegen als het nieuwe versies van de app uitbrengt, zegt Edwardsson.
Jeff Bigham , een universitair hoofddocent menselijke computerinteractie aan de Carnegie Mellon University die ondersteunende technologieën bestudeert, zegt dat Aipoly redelijk goed lijkt te werken, en het kan worden gebruikt om een idee van je omgeving te krijgen door de telefoon om je heen te bewegen. Maar hij vraagt zich af hoe nuttig sommige van zijn objectidentificerende vaardigheden zijn, aangezien mensen de neiging hebben om goed te bepalen wat iets is door het aan te raken.
Wat veel nuttiger is, is dingen uit elkaar te houden die anders niet van elkaar te onderscheiden zijn, zegt hij, zoals blikjes of dozen met eten die ongeveer hetzelfde aanvoelen.