Facebook's Sci-Fi-plan voor typen met je geest en horen met je huid

Regina Dugan

Een jaar geleden, Facebook opgestart een speciaal skunkworks-team genaamd Gebouw 8 om zich te concentreren op het maken van futuristische gadgets, en zei dat de geheime projecten het doel van het bedrijf om de wereld te verbinden, zouden bevorderen.

Woensdag onthulde het bedrijf op de jaarlijkse F8-ontwikkelaarsconferentie twee van de zes projecten die aan de gang zijn, en ze lijken veel op sciencefiction.

Facebook zegt dat het hoopt een nieuw soort niet-invasieve hersenmachine-interface te bouwen, zoals een pet of hoofdband, waarmee mensen kunnen sms'en door simpelweg na te denken. Een ander doel is om een ​​draagbaar apparaat te bouwen - misschien een armband - dat het mogelijk maakt om woorden met je huid te horen.

De leider van Building 8, Regina Dugan, zegt dat beide projecten al zes maanden aan de gang zijn en dat Facebook over twee jaar zal beslissen of ze de moeite waard zijn om door te gaan. Dugan was eerder het hoofd van Google's gelijknamige Advanced Technology and Projects Group en directeur van het DARPA-onderzoeksbureau van het Pentagon.

Het denken-naar-tekst project wordt geleid door Mark Chevillet , voorheen adjunct-hoogleraar neurowetenschappen aan de Johns Hopkins University.

Chevillet zei dat het doel over twee jaar is om een ​​niet-invasief systeem te bouwen dat spraaksignalen in de hersenen opvangt en mensen in staat stelt om die gedachten in stilte om te zetten in tekst met een snelheid van 100 woorden per minuut.

We willen die signalen gewoon kunnen krijgen voordat je het geluid daadwerkelijk produceert, zodat je het niet meer hardop hoeft te zeggen, zei hij.

Facebook zegt samen te werken met Johns Hopkins, de University of California, Berkeley en de University of California, San Francisco, aan het project, waarvan Chevillet zegt dat het zich zal richten op het vinden van een manier om licht, zoals leds of lasers, te gebruiken om neurale signalen afkomstig van de hersenschors.

De methode zou werken op een manier die gerelateerd is aan hoe functionele nabij-infrarood spectroscopie wordt momenteel gebruikt om hersenactiviteit te meten.

Zo'n apparaat - een hoofdband of een soort pet - kan nuttig zijn voor mensen die zo ernstig verlamd zijn dat ze niet kunnen communiceren. Na verloop van tijd kunnen herseninterfaces echter een manier zijn om een ​​bericht te denken in plaats van het te typen, of een tekst te verzenden in het midden van een gesprek, denkt Facebook. Ze kunnen ook een manier zijn om met anderen te communiceren in virtual of augmented reality, technologieën die Facebook zwaar heeft gepusht.

Chevillet zei dat er al een aantal goede demonstraties zijn van hersen-computerinterfaces, zoals a recent onderzoek waarin drie mensen met verlamming hun geest konden gebruiken om letters te selecteren met behulp van een cursor op het scherm, een van hen typte op acht woorden per minuut . In die studie registreerde een hersenimplantaat neurale signalen. Anderen hebben geëxperimenteerd met het proberen te interpreteren van welke geluiden mensen maken of denken.

Dergelijke projecten voor het decoderen van spraak omvatten chirurgie om een ​​elektronisch implantaat in de hersenen of op het oppervlak ervan te installeren. Nu onderzoeken de Facebook-onderzoekers of het mogelijk is om erachter te komen wat iemand wil zeggen door signalen buiten de hersenen te detecteren en deze vervolgens in tekst te vertalen. Als we dit nauwkeurig en in realtime doen, en in het tempo dat Facebook voorstelt, zou dat een enorme stap voorwaarts zijn ten opzichte van wat de neurowetenschap tot nu toe mogelijk heeft gemaakt.

Neurowetenschappers die de presentatie van Dugan vandaag op de Facebook-ontwikkelaarsconferentie bekeken, bleven achter met meer vragen dan antwoorden. Het was vrij vaag hoe ze directe neurale activiteit van deze optische technieken zouden krijgen, dat is de grote vraag, zegt Marc Slutzky, een neuroloog en neuro-ingenieur aan de Northwestern University. Als ze dat kunnen laten zien, opent dat een heel nieuw rijk aan mogelijkheden, maar de stand van de techniek is dat lang niet. Het valt nog te bezien hoe realistisch het is om deze zeer gedetailleerde informatie niet-invasief te verkrijgen.

Slutzky zegt dat hersenimplantaten onder de schedel tot dusver spraakgeluiden kunnen decoderen die mensen denken te produceren, slechts met een nauwkeurigheid van ongeveer 40 tot 50 procent.

Het tweede project, dat erop gericht is mensen woorden met hun huid te laten herkennen, is geïnspireerd op braille en tadoma, een communicatiemethode waarbij dove en blinde mensen een hand op het gezicht van een ander leggen om te voelen de trillingen en lucht terwijl die persoon spreekt.

In een experiment bouwden onderzoekers een apparaat met 16 actuatoren erop en bonden het aan de arm van een ingenieur. Een andere ingenieur had een tabletcomputer met negen woorden op het scherm; terwijl hij op de verschillende woorden tikte - zoals grijpen, zwart en kegel - voelde de eerste ingenieur trillingen op haar arm die overeenkwamen met de woorden en kon correct interpreteren dat ze een zwarte kegel op de tafel voor haar moest oppakken .

Om dit te doen, nemen de onderzoekers een gesproken woord - zoals zwart - en scheiden het in zijn frequentiecomponenten, en leveren die frequenties vervolgens aan de actuatoren op de arm, zei Dugan.

In plaats van van haar cochlea naar haar hersenen, neemt ze [het signaal] van haar arm naar haar hersenen, voegde ze eraan toe.

De onderzoekers zien dit als een manier om taal op de huid te brengen, in de hoop dat mensen uiteindelijk in staat zullen zijn om de methode te gebruiken om onderscheid te maken tussen ongeveer 100 woorden. Ze kunnen ook non-verbale signalen gebruiken, zoals druk en temperatuur.

Dugan zei dat het idee is om uiteindelijk een wearable te hebben die berichten verzendt die je kunt voelen, zonder dat je je telefoon hoeft te pakken en bijvoorbeeld een persoonlijk gesprek met iemand moet onderbreken.

Hoewel geen van deze projecten een gadget zal opleveren dat je kunt kopen, zei Dugan dat ze zich kan voorstellen dat het uiteindelijk zal gebeuren.

Ik denk dat we na twee jaar een redelijk goed idee moeten hebben of het mogelijk is om ze in consumptiegoederen in te bouwen, zei ze.

zich verstoppen