Hersenimplantaten, AI en een spraaksynthesizer hebben hersenactiviteit omgezet in robotwoorden

Categorie: Mensen en technologie Geplaatst 29 januari

Neurale netwerken zijn gebruikt om woorden die een mens heeft gehoord om te zetten in verstaanbare, herkenbare spraak. Het zou een stap kunnen zijn in de richting van technologie die op een dag de gedachten van mensen kan ontcijferen.

Een uitdaging: Dankzij fMRI-scanning hebben we al decennia bekend dat wanneer mensen spreken of anderen horen, het specifieke delen van hun hersenen activeert. Het is echter een enorme uitdaging gebleken om gedachten in woorden te vertalen. Een team van Columbia University heeft een systeem ontwikkeld dat deep learning combineert met een spraaksynthesizer om precies dat te doen.

De studie: Het team plaatste tijdelijk elektroden in de hersenen van vijf mensen die gepland waren om een ​​hersenoperatie te ondergaan voor epilepsie. (Mensen die deze procedure ondergaan, hebben vaak implantaten om meer te weten te komen over hun aanvallen.) De vrijwilligers werd gevraagd om naar opnames van zinnen te luisteren en hun hersenactiviteit werd gebruikt om op diepgaand leren gebaseerde spraakherkenningssoftware te trainen. Daarna luisterden ze naar 40 nummers die werden uitgesproken. De AI probeerde te decoderen wat ze hadden gehoord op basis van hun hersenactiviteit - en sprak de resultaten vervolgens hardop uit met een robotstem. Wat de stemsynthesizer produceerde, was 75% van de tijd begrijpelijk als het juiste woord, volgens vrijwilligers die ernaar luisterden. De resultaten zijn gepubliceerd in Wetenschappelijke rapporten vandaag (en je kunt de opnames beluisteren .) hier .)

Het doel? Op dit moment kan de technologie alleen woorden reproduceren die deze vijf patiënten hebben gehoord - en het zou bij niemand anders werken. Maar er is de hoop dat technologie als deze op een dag mensen die verlamd zijn kunnen laten communiceren met hun familie en vrienden, ondanks dat ze niet meer kunnen praten.

(Voor meer van dit soort verhalen kunt u zich aanmelden voor onze dagelijkse nieuwsbrief, The Download.)