A.I. zet hersensignalen om in tekst

Laurien Onderwater

02 april 2020 08:59

hersensignalen breinactiviteit algoritme

Amerikaanse onderzoekers ontwikkelden een kunstmatig intelligent systeem dat breinactiviteit in volledige zinnen kan veranderen.

Onze bovenkamer barst van de hersencellen. Elke keer als we denken, bewegen of voelen, zetten we die neuronen aan het werk. Er ontstaan dan kleine elektrische impulsen die worden doorgegeven aan de buur-neuronen. Hierbij ā€˜lekkenā€™ telkens een paar elektrische signalen. Van deze seintjes maken zogeheten brein-machine-interfaces (BMI) gebruik.

In Utrecht wordt onder andere gewerkt aan een BMI, zodat mensen die zijn getroffen door een hersenstaminfarct, bijvoorbeeld, weer kunnen communiceren. Maar ook wetenschappers van de Universiteit van Californiƫ doen hier veel onderzoek naar en onlangs boekten ze een succesje: ze ontwikkelden een algoritme dat hersenactiviteit vertaalt naar woorden.

Lees ook:

Tina Turner

Het team had voor zijn kleinschalige onderzoek vier mensen geworven. De deelnemers hadden allen epilepsie en om hun aanvallen te volgen, waren er al elektroden geplaatst op hun hersenen.

Vervolgens vroegen de onderzoekers deze mensen om bepaalde zinnen meerdere keren hardop uit te spreken. Zo moesten ze ā€œTina Turner is een popzangerā€ zeggen, en ā€œDie dieven hebben dertig juwelen gestolenā€.

De hersensignalen die hierbij waren betrokken, werden gevoed aan een algoritme. Dat keek op zijn beurt naar zich herhalende kenmerken in de gesproken zinnen. Het lette daarbij onder meer op klinkers, medeklinkers, en zinlengte. Deze patronen zette het algoritme om in een reeks cijfers.

Hersenactiviteit

De cijfers werden ingevoerd in een tweede neuraal netwerk dat hiermee probeerde te voorspellen wat er was gezegd door elke deelnemer. In eerste instantie spuugde het algoritme onzinzinnen uit. Maar toen het elke reeks woorden vergeleek met de zinnen die daadwerkelijk waren voorgelezen, verbeterde het zich. Het leerde namelijk hoe de cijfers betrekking hadden op woorden en welke woorden de neiging hebben om elkaar op te volgen.

In een tweede experiment testten de onderzoekers het systeem waarbij de zinnen niet hardop werden uitgesproken. Het algoritme moest de tekst dus herkennen aan de hand van de hersenactiviteit van de deelnemers.

Dat verliep niet vlekkeloos. De zin ā€œEen deel van de cake was opgegeten door de hondā€ werd voorspeld als ā€œEen deel van de cake was het koekjeā€. En ā€œDie muzikanten harmoniseren prachtig” was gedecodeerd als “De spinazie was een beroemde zanger”. Dit is voor een deel te wijten aan het beperkte vocabulaire van het neurale netwerk, het kende misschien maar 250 woorden.

Beperkingen

ā€œHet onderzoek laat echt een paar zeer boeiende resultaten zienā€, mailt Christian Herff van Maastricht University, die niet was betrokken bij de studie. ā€œHet kleine aantal patiĆ«nten is naar mijn mening geen beperking, omdat het systeem hoe dan ook voor elke persoon afzonderlijk wordt getraind. Het is dus echt belangrijk om te laten zien dat zo’n systeem kan worden gebouwd.ā€

ā€œDe belangrijkste beperkingen zijn dat de patiĆ«nten in deze studie nog steeds normaal spreken en daarom ook gewoon Siri (de spraakassistent van Apple, red.) zouden kunnen gebruiken.ā€ Om de bevindingen naar de patiĆ«nten te brengen die ze nodig hebben, is het volgens Herff noodzakelijk om spraak rechtstreeks te decoderen wanneer de patiĆ«nten het willen produceren.

ā€œBovendien zou het voor verlamde patiĆ«nten nodig zijn om denkbeeldige spraak te decoderen in plaats van hardop uitgesproken zinnen. Dit zijn de twee zaken die we in Maastricht proberen aan te pakken.ā€

Bronnen: Nature Neuroscience, ScienceAlert, The Guardian

Beeld: iStock/Getty Images

Ben je geĆÆnteresseerd in de wereld van wetenschap & technologie en wil je hier graag meer over lezen? Word danĀ lid van KIJK!Ā 

Meest gelezen


De inhoud op deze pagina wordt momenteel geblokkeerd om jouw cookie-keuzes te respecteren. Klik hier om jouw cookie-voorkeuren aan te passen en de inhoud te bekijken.
Je kan jouw keuzes op elk moment wijzigen door onderaan de site op "Cookie-instellingen" te klikken."