Учёные из Нью-Йорка разработали нейронную сеть, различающую связи в производстве речи

Воспроизводство человеческой речи представляет собой сложный нейронный феномен, который до сих пор вызывает затруднения при объяснении. Разгадка этой сложной головоломки требует выделения сложной нейронной сети, управляющей точными движениями мышц в ротовой полости, челюсти и губах, а также обработки аудиообратной связи при прослушивании собственного голоса.
Группа исследователей из Нью-Йоркского университета под руководством Адина Флинкера и Яо Вана добилась значительных прорывов, которые позволят разгадать эту головоломку и использовать полученные знания для разработки технологии восстановления речи. Это позволит воссоздавать голос у пациентов, потерявших способность говорить.
Исследователи использовали инновационные методы глубокого обучения на мозговых записях человека, чтобы декодировать параметры речи. Они разработали нейронную сеть, способную различать прямую и обратную связь в производстве речи. Это позволило им более детально изучить вклад каждого типа связи в речевой процесс.