Новый подход в рамках создания искусственного интеллекта для преобразования сигналов мозга в речь

Акбари и др. «Towards reconstructing intelligible speech from the human auditory cortex», журнал «Scientific reports», январь 2019

В недавнем исследовании ученые продемонстрировали, что сигналы мозга из слуховой зоны коры головного мозга человека могут с высоким уровнем успеха быть преобразованы в понятную речь. В ходе исследования сигналы мозга из слуховой коры пяти участников (страдающих эпилепсией) были записаны, в то время, когда они слушали рассказы и числа, которые им называли. Исследователи специально выбрали пациентов с эпилепсией, поскольку они уже проходили клиническую процедуру, включающую установку электродов в височную долю мозга. Эта процедура называется инвазивной электрокортикографией. Затем исследователи произнесли 10 чисел на ухо участникам испытания: от нуля до девяти. Каждое число вызывало уникальный ответ в мозге. Звук, производимый вокодером в ответ на эти сигналы мозга, анализировался и очищался с помощью нейронных сетей – формы искусственного интеллекта, имитирующего структуру нейронов в биологическом мозге. Примечательно, что роботизированные переводы были успешно поняты 75% людей, привлеченных для тестирования технологии. Эти результаты предполагают обнадеживающее будущее для интерфейса «мозг-компьютер». В частности, эта новая технология имеет большой потенциал к тому, чтобы позволить «обрести голос» людям, которые парализованы или находятся в тяжелом состоянии. Несмотря на потенциал, путь к практически применимому устройству еще долог. Чтобы выйти за рамки простых чисел и получить доступ к мыслям, связанным с речью, исследователям придется изучить другую часть мозга, известную как зона Брока (центр). Она находится в лобной доле и связана с речеобразованием и обработкой языка.