211service.com
AI-vooruitgang maakt het mogelijk om te zoeken, winkelen met afbeeldingen
Het web is de afgelopen 20 jaar veel veranderd, maar tekstzoekvakken zijn een constante. Het typen van tekst in gepixelde rechthoeken blijft een hoofdbestanddeel van hoe we omgaan met websites en mobiele apps zoals online winkels.

Pinterest-gebruikers kunnen naar items op de service zoeken door delen van een afbeelding te selecteren.
Recente ontwikkelingen in beeldherkenningssoftware worden gebruikt om dat uit te dagen. Het sociale netwerk Pinterest en de online schoenenwinkel Shoes.com testen nieuwe manieren om te zoeken of te bladeren met alleen afbeeldingen in plaats van tekst.
Beide bedrijven hebben zich tot een techniek gewend die bekend staat als deep learning, waardoor software recentelijk match mensen op sommige benchmarks voor beeldherkenning. De techniek is de drijvende kracht achter het zoeken naar afbeeldingen van Google en de service voor het organiseren van foto's die deze zomer is gelanceerd (zie Google Rolls Out New Automated Helpers).
Met de nieuwe visuele zoekfunctie van Pinterest kun je een kader tekenen rond iets dat in een afbeelding op de service wordt gezien om visueel vergelijkbare items te vinden uit een index van meer dan een miljard. In een snelle test van de functie, bijvoorbeeld, leverde het tekenen rond een koffiezetapparaat op een foto van een keuken andere soortgelijke op, inclusief close-upfoto's van exact hetzelfde model.
Sommige items die door een visuele zoekopdracht worden opgeroepen, worden geleverd met koopknoppen - een functie die Pinterest deze zomer heeft geïntroduceerd. De zoekfunctie voor afbeeldingen wordt deze week uitgerold naar alle gebruikers van de website en mobiele apps van het bedrijf. Het systeem van Pinterest leerde afbeeldingen te begrijpen door te tekenen op de tekst die mensen bij foto's die op de service werden gedeeld, bijvoegden.
Bedrijven hebben eerder geprobeerd beeldzoektechnologie te gebruiken om winkelen of het ontdekken van producten gemakkelijker te maken. Amazon bundelde bijvoorbeeld een app om producten op te zoeken die vorig jaar op een foto waren gemaakt met zijn geflopte Fire-smartphone. In 2010 kocht Google Like.com, dat een winkelvergelijkingssite had gelanceerd die producten kon vinden die visueel vergelijkbaar waren met degene die je had geselecteerd en die je zelfs belangrijke details op een afbeelding liet markeren om de selecties te begeleiden. Google toont vandaag visueel vergelijkbare producten op zijn winkelsite, maar laat u geen details markeren.
Kevin Jing, hoofd visueel zoeken bij Pinterest, zegt dat visueel zoeken nu een grotere kans heeft om onmisbaar te worden. Beeldrepresentatie afkomstig van deep learning is veel, veel nauwkeuriger, zegt hij. Ook dit jaar is er zoveel verbeterd. De nieuwe visuele zoekhulpmiddelen zijn echter niet perfect. Pas als veel mensen de kans hebben gekregen om ze uit te proberen, wordt duidelijk of de onderliggende technologie voldoende is verbeterd om de manier waarop mensen omgaan met online diensten aanzienlijk te veranderen.
Schoenenretailer Shoes.com test een andere benadering van visueel zoeken, ook mogelijk gemaakt door deep learning. Het bedrijf is de eerste die gebruikmaakt van beeldverwerkingstechnologie gericht op retailers, ontwikkeld door kunstmatige-intelligentie startup Sentient, die meer dan $ 143 miljoen heeft opgehaald bij investeerders (zie AI Supercomputer gebouwd door datawarehouses te tikken voor inactieve computerkracht).
Shoes.com test de technologie van Sentient in eerste instantie in de sectie dameslaarzen van zijn Canadese winkel. Klik op de visuele filterknop en je krijgt een raster van 12 afbeeldingen te zien waarvan de software van Sentient denkt dat ze de meest verschillende clusters van stijlen uit de catalogus van ongeveer 7.000 laarzen vertegenwoordigen. Selecteer degene die het dichtst in de buurt komt van wat u zoekt en de software zal de visuele kenmerken van uw keuze gebruiken om het raster te vernieuwen om 11 meer te tonen die erop lijken. Door dat proces een paar keer te herhalen, kun je je thuis voelen in een selectie laarzen met zeer specifieke kenmerken.
Nigel Duffy, Chief Technology Officer van Sentient, zegt dat de nieuwe functie laat zien hoe software die afbeeldingen kan begrijpen, online winkelen efficiënter maakt. Dit is een categorie waar het heel moeilijk is om in woorden voor een zoekmachine te beschrijven wat je zoekt, zegt hij. We kunnen heel snel zeer gedetailleerde voorkeuren krijgen.
Roger Hardy, CEO van Shoes.com, zegt dat er aanwijzingen zijn dat de visuele filterfunctie de verkoop verhoogt en dat hij overweegt deze uit te rollen naar andere categorieën schoenen. Duffy van Sentient zegt dat hij verwacht dat de onderliggende technologie wordt toegepast op andere producten, zoals sieraden, tassen en andere accessoires.