Учените са създали система, която декодира мозъчните сигнали и ги превръща в реч. По този начин можете да разберете какво казва темата, без да чувате думите му. С течение на времето такива устройства могат да се превърнат в синтезатори на речта за неми.
Постижението е описано в научна статия, публикувана в списанието Nature Neuroscience.
Вече няколко години различни изследователски групи създават системи, които превръщат картината на мозъчната дейност в думи, като всъщност заменят човешкия речев апарат. Въпреки това, предишните работи обикновено се занимават с връзката на мозъчните сигнали с движенията на органите на речта или говоримите звуци.
Изследователи от Калифорнийския университет в Сан Франциско решиха да направят пряк път. Техният дизайн картографира невронните сигнали директно към фразите. За да направят това, те адаптираха алгоритмите, използвани в машинния превод от един език на друг. В този случай се решава подобен проблем. Мозъкът, който възприема речта, го превежда на езика на неговата електрическа активност. Задачата на изкуствения интелект е да извършва обратен превод.
Изследователите адаптираха подхода, използван за машинен превод, за декодиране на невронни сигнали. Превод на Vesti. Nauka.
В експеримента участват четири жени с епилепсия. Преди това лекарите ги въвеждаха за медицински цели в мозъка на около 250 електрода, които сега служат в полза на науката.
Всички предмети четат набор от фрази. По това време електродите регистрират активността на мозъка им, свързана с движенията на устните, произношението на гласни и съгласни и други параметри.
Тогава три изкуствени невронни мрежи влязоха в игра. Първите подчертани модели в начина на промяна на сигнала от електродите. Вторият трансформира резултата от първия в специални математически структури (шаблони). Накрая третият ги превърна в текст на английски.
Промоционално видео:
Участниците в експеримента повториха всяко от 30-50 изречения два пъти. Отговорът на нервните клетки на първото изказване на фразата служи за трениране на системата, а на второто изказване за проверка на нейните умения.
В резултат на това системата греши само 3% от времето. Това е много добър резултат за този вид развитие.
Вярно, лексиката на използваните фрази беше ограничена до 250 думи. На първо място, и това е много за хората, които днес не могат да произнесат или напишат нищо поради парализа. И второ, специалистите продължават работата си.
Автор: Анатолий Глянцев
