211service.com
Het neurale netwerk van een startup kan video begrijpen
De afgelopen jaren hebben onderzoekers van onder meer Google en Facebook indrukwekkende doorbraken bereikt in trainingssoftware om te begrijpen wat er in afbeeldingen gebeurt, dankzij een techniek die bekend staat als deep learning. Nu een startup genaamd Clarifai biedt een service die deep learning gebruikt om video te begrijpen.
De videoverwerkingssoftware van Clarifai kan objecten en scènes in video identificeren en biedt een tijdlijn zodat u naar de plaats kunt springen waar een bepaald element verschijnt.
Het bedrijf zegt dat zijn software snel videoclips kan analyseren om 10.000 verschillende objecten of soorten scènes te herkennen. In een demo die vorige week werd gegeven op a conferentie over diep leren , heeft Matthew Zeiler, medeoprichter en CEO van Clarifai, een clip geüpload met beelden van een gevarieerd alpenlandschap. De software creëerde een tijdlijn met grafische lijnen die samenvatten wanneer verschillende objecten of soorten scènes werden gedetecteerd. Het liet precies zien wanneer sneeuw en bergen afzonderlijk en samen voorkwamen. De software kan video sneller analyseren dan een mens ernaar kan kijken; in de demonstratie werd de 3,5 minuten durende clip in slechts 10 seconden verwerkt.
Clarifai biedt de technologie als een service aan en verwacht dat deze zal worden gebruikt voor zaken als het matchen van advertenties met inhoud in online video's of het ontwikkelen van nieuwe manieren om videocollecties te ordenen en beeldmateriaal te bewerken.
Deep learning omvat het verwerken van gegevens via een netwerk van eenvoudige gesimuleerde neuronen die zijn getraind met behulp van voorbeeldgegevens. De technologie van Clarifai is ontstaan in onderzoek aan de New York University en in 2013 nam het bedrijf de top vijf plaatsen bij de toonaangevende jaarlijkse wedstrijd voor software die de inhoud van afbeeldingen identificeert.
Het meeste onderzoek in het veld heeft zich tot nu toe gericht op stilstaande beelden, niet op video. Clarifai lanceerde vorig jaar een dienst voor het herkennen van stilstaande beelden. Een andere startup die deep learning gebruikt, Aan de rechterkant , lanceerde eind december zijn eigen videoverwerkingsdienst.
Iedereen kan het nieuwe videosysteem van Clarifai op de proef stellen. Op zijn website kun je een videoclip van maximaal 10 megabyte uploaden voor analyse. De verschillende gedetecteerde objecten of soorten scènes kunnen auto's, bomen of mensen zijn. De software kan ook meer abstracte beschrijvende concepten toepassen, zoals plezier of saamhorigheid.
Zeiler gelooft dat zijn technologie kan leiden tot een nieuwe benadering van het aanbieden van advertenties naast online video's. De software kan identificeren waar in de video de optimale plaats is om een advertentie te plaatsen, zei hij.
Bedrijven kunnen al betalen om hun advertenties naast video's van een bepaald type of video's over een bepaald onderwerp te plaatsen. Zeiler is van mening dat het voor adverteerders nog aantrekkelijker moet zijn om advertenties automatisch te koppelen aan bepaalde momenten in video's. De technologie van Clarifai zou het bijvoorbeeld mogelijk kunnen maken voor Starbucks om zijn advertenties te laten verschijnen wanneer er koffie wordt geconsumeerd in beeldmateriaal.
Zeiler zegt al samen te werken met bedrijven die geïnteresseerd zijn in het gebruik van videoanalysetechnologie. Het bedrijf werkt er ook aan om de software meer te laten doen. Met twee functies die in ontwikkeling zijn, kan de software automatisch samenvatten wat er in een video gebeurt en herkennen wanneer een bepaalde activiteit heeft plaatsgevonden, zegt Zeiler.