Разработчиците от университета Пърдю създадоха невронна мрежа, която може да анализира fMRI изображения на мозъка, направени по време на гледане на видео, и след това в реално време да определят какво гледа човекът.
В експеримента участваха три обекта, на които бяха показани около хиляда малки видеоклипа. По време на шоуто учените успяха да получат огромно количество данни от fMRI, които след това започнаха да демонстрират конволюционна невронна мрежа, обучена да съвпада мозъчната активност с сюжетите на видеоклиповете. Използвайки fMRI изображението, мрежата се научи много бързо и правилно да определи какво точно следи доброволецът по времето, когато е направено изображението.
В допълнение, невронната мрежа се научи да дешифрира данните на други хора въз основа на информацията, получена от fMRI на други доброволци, докато резултатът беше еднакво висок както с fMRI данните на здрави лица, така и с тези със зрителни увреждания.
Благодарение на това проучване учените успяха да дешифрират мислите и в същото време разбраха кои части на мозъка са отговорни за разпознаването на изображения и видеоклипове. Въпросът е, че мозъкът разделя видеото на отделни компоненти. Например, ако човек види автомобил, движещ се на фона на стена, тогава едната част на мозъка разпознава стената, а другата кола - по този начин учените са успели да проследят работата на мозъка, когато сравняват отделни блокове информация и я обединяват в една снимка.
Вячеслав Ларионов
