Американські науковці розробили нейроінтерфейс нового покоління, який дав змогу 47-річній жінці, паралізованій і німій після інсульту, знову «говорити» – синтезуючи мову прямо з її думок у режимі реального часу.
Нову технологію представили у журналі Nature Neuroscience. Система зчитує нейронні сигнали з мозкової кори кожні 80 мілісекунд і миттєво перетворює їх у звукову мову без помітних затримок. Це дозволяє відтворити голос, максимально наближений до природного темпу живої розмови.
Штучний голос на основі справжнього
Для досягнення такого рівня швидкості й точності дослідники використали глибоку нейронну мережу, натреновану на основі сенсомоторної активності пацієнтки. В процесі навчання жінка подумки «озвучувала» 100 унікальних речень із понад тисячею різних слів, не вимовляючи їх уголос. Голос для синтезу був змодельований за записами її мовлення до інсульту.
Інтерфейс також успішно працює з обмеженим словниковим запасом: окрема модель була натренована на 50 базових фраз для пришвидшеної комунікації. В обох випадках система показала вдвічі кращі результати за попередні аналоги за кількістю слів, які вдається передати за хвилину.
Без затримок і без голосу
На відміну від традиційних способів, які потребують повного складання речення перед озвученням, ця система озвучує думки в потоці. Вона також не вимагає тренувань мовленнєвих м’язів, що критично для користувачів із тяжкими порушеннями моторики або без голосового досвіду.
«Навіть ті слова, яких система раніше не “чула”, вона вміла інтерпретувати на основі загальної активності кори мозку» — зазначили автори проєкту.
Ця технологія відкриває нові можливості для людей із порушеннями мовлення, дозволяючи їм повернути голос без інвазивних механізмів або зовнішніх пристроїв.
Залишити коментар