Он считывает активность мозга и преобразовывает ее в речь

Группа американских ученых создала нейронную сеть, которая может считывать активность коры головного мозга во время речи, преобразовывать полученные сигналы в код и воспроизводить сказанное человеком. В будущем, говорят ученые, это может помочь глухонемым людям «заговорить».

Американские ученые Джозеф Мейкин, Дэвид Мозес и Эдвард Чанг научили искусственный интеллект (ИИ) считывать активность головного мозга и понимать, что человек говорил в этот момент. Итоги их исследования были опубликованы в журнале Nature Neuroscience.

Пока что модель нейронной сети, созданная группой ученых, работает лишь на ограниченном объеме исходных данных с заранее вычлененной мозговой активностью, отвечающей за речь человека. Тем не менее им удалось добиться точности воспроизведения сказанного в 97%.

Сами исследователи же говорят о том, что созданный ими ИИ может стать прорывной технологией, которая подарит немым людям возможность говорить. «Мы пока еще далеки от этого, но думаем, что эта технология может стать базой для речевого протезирования»,— цитирует господина Мейкина The Guardian.

Для создания искусственного интеллекта, способного читать мысли, ученые попросили нескольких добровольцев зачитать наборы коротких фраз вслух. Для самой нейросети при этом отбирались только те фразы, которые были повторены хотя бы тремя разными участниками. В итоге в распоряжении ученых оказалось около 50 фраз, состоящих из 250 уникальных слов. Во время чтения к участникам эксперимента были подсоединены электроды, которые позволяли считывать их мозговую активность. Полученные данные были загружены в программу, которая трансформировала их в наборы чисел. Затем в дело вступала непосредственно нейросеть, которая попыталась воспроизвести из полученных цифр изначально зачитанный текст. При первых попытках система выдавала полную бессмыслицу. Но в нее были загружены оригинальные фразы, с которыми она каждый раз сравнивала собственный выдаваемый текст. Вместе с тем система вычленяла логику построения фраз. В результате множества прогонов ученым удалось достичь небывалой точности воспроизведения с долей ошибок всего 3%.

Ведь их нейросеть училась на очень маленьком объеме данных, а при увеличении их объема процент ошибок резко возрастает. Впрочем, в случае, если для эксперимента берется речь лишь одного человека, система учится быстрее. А значит, она может стать идеальным помощником для немых людей в будущем.

Кирилл Сарханянц

Источник: Коммерсант