Новый речевой интерфейс позволил пациенту с БАС синтезировать 2,7 миллиона слов

Двухступенчатая система глубокого обучения преобразует активности мозга в синтетическую речь: сначала специальный алгоритм декодирует нейронные сигналы в фонемы, а затем крупная языковая модель собирает их в слова и предложения.

Система показала точность свыше 99% при минимальной задержке всего в 30 миллисекунд, что сопоставимо с темпом обычного разговора. В испытаниях с участием пациента с тяжелой формой бокового амиотрофического склероза (БАС) устройство позволило ему синтезировать голосом более 2,7 миллиона слов за два года, менять интонации и даже петь. Модель воссоздала его собственный голоc по архивным записям, сделанным до болезни, и позволила сохранить полноценную работу и общение с близкими.