AI kan zien wanneer acteurs aan het zoenen zijn - en misschien ook wanneer jij dat bent

Categorie: Kunstmatige intelligentie Geplaatst 14 juni

Terwijl objectherkenning in video snel is gevorderd, is scènedetectie, of weten wat er daadwerkelijk op het scherm gebeurt, achtergebleven. Maar het kunnen analyseren en herkennen van acties in beeldmateriaal kan nuttig zijn voor toepassingen zoals videobewerking. Dus Amir Ziai, een Stanford-student ten tijde van het onderzoek en nu een senior datawetenschapper bij Netflix, nam het op zich om de stand van de techniek te bevorderen, met name in het detecteren van kusscènes in Hollywood . Het onderzoek lijkt misschien wat luchtig of dwaas, maar het heeft belangrijke implicaties.

Ziai selecteerde een subset van 100 films en bestempelde hun verschillende niet-zoenende en zoenende scènes tussen de 10 en 20 seconden lang. Hij haalde vervolgens beeld- en audiostills voor elke seconde van elke scène en gebruikte ze om een ​​machine learning-algoritme te trainen. Het resulterende model was in staat om te identificeren op welke seconden kussen werd afgebeeld en deze in scènes te groeperen, waardoor een hoge mate van nauwkeurigheid werd bereikt.

Het onderzoek laat zien hoe snel de middelen om beeldmateriaal te analyseren voor specifieke, zelfs intieme, acties zijn gevorderd. Koppel dat aan bewakingsbeelden en de implicaties worden al snel Orwelliaans. In feite, in een nieuw rapport , luidde de ACLU de noodklok over een toekomst waarin camerabezitters snel ongebruikelijk gedrag zouden kunnen herkennen of gênante momenten zouden kunnen opzoeken. Net als deepfakes is het weer een ander voorbeeld van een situatie waarin technologen moeten nadenken over de gevolgen van hun werk.

Meld u aan voor onze Webby-genomineerde AI-nieuwsbrief The Algorithm om meer van dit soort verhalen rechtstreeks in uw inbox te ontvangen. Het is gratis.