Nu kunt u emoji's gebruiken om naar schattige kattenvideo's te zoeken

In een beweging die het mogelijk maakt om je liefde voor emoji's naadloos te combineren met schattige dierenvideo's, heeft een groep onderzoekers een prototype gebouwd van een zoekmachine die de kleine pictogrammen gebruikt om video's te zoeken.

Genaamd Emoji2Video , de zoekmachine is gemaakt door onderzoekers van de Universiteit van Amsterdam en Qualcomm Research om te laten zien hoe emoji's kunnen worden gebruikt om een ​​dichte, gemakkelijk te begrijpen weergave te geven van wat er in afbeeldingen en video's gebeurt - iets dat je kunt begrijpen het maakt niet uit welke taal je spreekt, of je kunt lezen of niet.

Bezoekers van de site kunnen op een of meer emoji's klikken uit een samengestelde lijst van 385 (de huidige volledige lijst samengesteld door een groep genaamd het Unicode Consortium bevat bijna 1.300 van hen, maar de onderzoekers hebben degenen uitgesloten waarvan ze dachten dat ze niet zo relevant zouden zijn voor video-zoekopdrachten, zoals symbolen en cijfers, en degenen die enigszins duplicerend waren). De pictogrammen die je kiest, worden gebruikt om in een dataset van 45.000 YouTube-video's te zoeken naar relevante overeenkomsten.

Het is een manier om heel snel in te zoomen op het zeer specifieke waarnaar je op zoek bent, zegt Spencer Cappallo , een afgestudeerde student aan de Universiteit van Amsterdam en co-auteur van het artikel.

Onderzoekers presenteren deze week Emoji2Video en een paper waarin de onderliggende technologie wordt uitgelegd die wordt gebruikt om de zoekmachine te laten werken op een technologieconferentie in Brisbane, Australië.

Emoji's zijn in de jaren negentig in Japan gemaakt en zijn de afgelopen jaren steeds populairder geworden doordat smartphonemakers ze hebben toegevoegd aan virtuele toetsenborden, waardoor het gemakkelijk is om een ​​sms-bericht te accentueren met een klein roze hartje of een piepkleine martini.

De pictogrammen worden zo vaak gebruikt dat sommige online services gebruikers al laten zoeken via emoji's: de Bing-zoekmachine van Microsoft accepteert emoji-query's, terwijl Yelp je naar bedrijven laat zoeken door bijvoorbeeld een kip-emoji in te typen in plaats van het woord kip. Cappallo zegt dat de onderzoekers zich met name op video wilden concentreren, omdat ze nog niet veel werk hadden gezien over het relateren van emoji's aan foto's en video's, en vice versa.

De onderzoekers gebruikten diepgaande leertechnieken om emoji-labels te maken voor video's die op de juiste manier lijken te vertegenwoordigen wat erin zit (bijvoorbeeld een honkbal of een hond) en om te bepalen hoe waarschijnlijk het is dat die dingen zich in een bepaald frame bevinden. Ongeveer één op de 50 frames werd geanalyseerd, zegt Cappallo, en de emoji's die zijn gekozen om die te vertegenwoordigen, worden gemiddeld om één korte emoji-lijst te krijgen, gerangschikt in afnemend vertrouwen, voor die specifieke video.

Ik heb geprobeerd Emoji2Video een paar vragen van toenemende moeilijkheidsgraad te geven, gewoon om te zien waar het me zou brengen. Eerst gaf ik het een eenvoudige test door alleen de kattenemoji te kiezen. De resultaten bevatten een link naar een video waarin een kat gras likt in iemands achtertuin, een andere reclame voor een kattenspeeltje, enzovoort. Bij een andere zoekopdracht gebruikte ik de emoji's voor bikini en fiets, en kreeg een video van twee vrouwen in kleine tweedelige kledingstukken die een Harley wassen. Bij een derde zoekopdracht probeerde ik drie emoji's tegelijk: een boos gezicht, een verjaardagstaart en een kameel. Het beste videoresultaat omvatte twee van de drie, omdat het iemand afbeeldde die pronkte met een indrukwekkende verjaardagstaart met Angry Birds-thema.

Het is duidelijk dat de zoekmachine nog in de kinderschoenen staat en slechts een klein deel van de video's op YouTube doorzoekt, maar de onderzoekers zeggen dat het niet moeilijk zou zijn om meer toe te voegen, en ze zijn van plan dit te doen. Cappallo zegt dat op dit moment de topresultaten soms niet representatief zijn voor de emoji waarmee je zoekt, omdat de dataset simpelweg geen video met dat specifieke ding bevat.

Naast video, zegt Cappallo, kan het werk ook nuttig zijn voor het maken van kleine, pictogramgestuurde samenvattingen van fotoalbums, of voor het verkrijgen van informatie van kleine schermen, zoals slimme horloges, waar het lastig kan zijn om te typen, maar misschien niet zo moeilijk om te tik op een kleine afbeelding of twee.

Tyler Schnoebelen , een taalkundige en medeoprichter van Idibon , een startup die ongestructureerde taalgegevens verwerkt (inclusief emoticons en emoji's), zegt dat het project nuttig kan zijn voor het vinden van video's die zijn gemaakt door mensen die niet dezelfde taal spreken als jij. Maar voor hem lijkt het punt van het project te zijn dat het gewoon leuk is.

Hij merkt ook op dat de betekenissen achter een emoji van cultuur tot cultuur kunnen verschillen, wat het moeilijker kan maken om directe vertalingen te vinden (de aubergine-emoji is een opvallend voorbeeld, omdat het vaak wordt beschouwd als een fallus in plaats van een veelzijdige vrucht ).

De betekenis van een emoji is meer dan alleen het zelfstandig naamwoord dat het visualiseert, zegt hij.

zich verstoppen