Moždani dekoder čita misli i pretvara ih u tekst

Alat poboljšan novim AI algoritmom mogu koristiti različite osobe, a proces uvježbavanja traje samo sat vremena

Mladen Smrekar srijeda, 19. veljače 2025. u 21:47
Neuroznanstvenici Teksaškog sveučilišta Austinu uz fMRI skener kojim su prikupljali podatke za uvježbavanje semantičkog dekodera 📷 Nolan Zunk/UT Austin
Neuroznanstvenici Teksaškog sveučilišta Austinu uz fMRI skener kojim su prikupljali podatke za uvježbavanje semantičkog dekodera Nolan Zunk/UT Austin

Milijuni ljudi na svijetu prisiljeni su živjeti s afazijom, moždanim poremećajem koji im otežava da svoje misli pretvore u riječi i razumiju govorni jezik. Jedno moguće rješenje ovog problema je takozvani moždani dekoder, uređaj koji koristi strojno učenje za prevođenje nečijih misli u tekst, na temelju odgovora mozga na priče koje je slušao. Ranije verzije, opisane svojedobno i u Bugu, zahtijevale su od sudionika da slušaju priče unutar MRI uređaja mnogo sati, a ti su dekoderi radili samo s pojedincima na kojima su bili obučeni.

Pretvaranje misli u tekst

No, sad su računalni neuroznanstvenici Teksaškog sveučilišta u Austinu dekoder poboljšali umjetnom inteligencijom koja misli pretvara u tekst. Njihov novi algoritam, opisan u časopisu Current Biology, može prevesti nečije misli u kontinuirani tekst, bez potrebe da osoba razumije izgovorene riječi.

Aktivnost mozga dvoje ljudi koji gledaju isti nijemi film: algoritam pretvara moždanu aktivnost jedne osobe u predviđenu moždanu aktivnost druge  📷 Jerry Tang/UT Austin
Aktivnost mozga dvoje ljudi koji gledaju isti nijemi film: algoritam pretvara moždanu aktivnost jedne osobe u predviđenu moždanu aktivnost druge Jerry Tang/UT Austin

Proces uvježbavanja alata na jedinstvenim obrascima moždane aktivnosti osobe traje samo oko sat vremena i mogu ga koristiti različite osobe, bez dodatne obuke algoritma.

Duboko preklapanje

Kako bi uvježbali stariju verziju moždanog dekodera, sudionici su morali nepomično ležati u fMRI skeneru oko 16 sati dok su slušali podcaste, a izvorni moždani dekoder radio je samo na ljudima za koje je obučen. Novi algoritam pretvarača uči kako preslikati moždanu aktivnost nove osobe u mozak nekoga čija je aktivnost prethodno korištena za treniranje moždanog dekodera. 

Jerry Tang i Alex Huth demonstrirali su alat temeljen na umjetnoj inteligenciji koji može prevesti nečije misli u kontinuirani tekst, bez potrebe da osoba razumije izgovorene riječi  📷 Nolan Zunk/UT Austin
Jerry Tang i Alex Huth demonstrirali su alat temeljen na umjetnoj inteligenciji koji može prevesti nečije misli u kontinuirani tekst, bez potrebe da osoba razumije izgovorene riječi Nolan Zunk/UT Austin

Ovaj rad, kažu istraživači, ukazuje na duboko preklapanje između onoga što se događa u mozgu kad slušate nekoga kako vam priča priču i onoga što se događa kad gledate video koji priča priču. Ljudski mozak obje vrste priča tretira kao iste.

”Ono što dekodiramo zapravo nije jezik; to su prikazi nečega iznad razine jezika i nisu vezani uz modalitet unosa”, tvrde istraživači koji su primijetili da poboljšani sustav, baš kao i izvorni dekoder, radi samo s kooperativnim sudionicima koji dobrovoljno sudjeluju u obuci. Ako ljudi pružaju otpor, rezultati su neupotrebljivi.