реклама
Новости Hardware

Учёные с помощью ИИ в четыре раза ускорили преобразование мыслей в речь через нейроинтерфейс

В журнале Nature вышли две статьи, в которых учёные рассказали о новых методиках трансляции мыслей пациентов с поражениями мозга в речь и эмоции. Преобразование мозговой активности в текст и голосовое общение происходит с помощью алгоритма машинного обучения. Учёным удалось увеличить скорость преобразования почти в четыре раза с 18 слов в минуту до 78. Это ниже среднего для обычного разговора темпа в 160 слов в минуту, но кратно быстрее, чем было до этого.

 Источник изображений: Noah Berger/UCSF

Источник изображений: Noah Berger/UCSF

Нейродегенеративные заболевания, инсульты или травмы способны лишить человека речи разными способами, но один из них достаточно легко поддаётся исправлению. Современные технологии позволяют создать мостик между здоровыми участками мозга, отвечающими за речь или мысленное произношение, и мышцами, управляющими мимикой и позволяющими говорить. Естественный канал коммуникации между мышцами и мозгом может быть разорван в случае болезни или травмы, и тогда на помощь приходит интерфейс человек-компьютер и обучаемый алгоритм.

В мозг пациента встраивается датчик или несколько датчиков с электродами, входящими в зоны активности мозга человека, ответственные за произношение и речь (хотя учёные пока не до конца понимают, какие это зоны). В одном случае, например, учёные установили на речевую область сенсомоторной коры и на область верхней височной извилины женщины после инсульта 253 электрода. После болезни она не могла говорить и даже печатать.

В течение нескольких недель ИИ обучался на примере произношения пациенткой 1024 слов из специально подобранного словаря. Для упрощения работы алгоритма он разбивал все слова на фонемы, которых было всего 39. Затем словарный запас женщины был расширен до 125 тыс. слов. Машинный алгоритм смог распознавать мысленное произношение женщины с ошибками на уровне 25 %, но со скоростью до 78 слов в минуту.

Алгоритм также научили распознавать эмоции пациентки — горе, радость, удивление. Наконец, используя старую видеозапись женщины, учёные создали её компьютерный образ — аватар — и заставили его транслировать текстовые сообщения в голосовые. По сути, они вернули пациентке возможность разговаривать.

Сегодня подобные процедуры восстановления сопряжены с длительным обучением ИИ и необходимостью быть постоянно подключённым к компьютеру. Учёные из Калифорнийского университета в Сан-Франциско (UCSF) и Калифорнийского университета в Беркли, которые реализовали представленную методику, теперь работают над беспроводными вариантами транслятора. Когда-нибудь это повысит социальную вовлечённость людей с подобными медицинскими проблемами.

Источник:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Материалы по теме
window-new
Soft
Hard
Тренды 🔥
Трамповские пошлины сорвали сделку по продаже американской части TikTok, несмотря на «огромный прогресс» 2 ч.
Единый реестр российского ПО вырос в 2024 году на четверть до 24,3 тыс. решений 4 ч.
Новая статья: Wreckfest 2 — праздник будет, но потом. Предварительный обзор 14 ч.
«Киберпротект» представил систему резервного копирования и восстановления данных для малого бизнеса 15 ч.
FromSoftware не бросит однопользовательские игры ради мультиплеерных, хоть сейчас и сосредоточена на Elden Ring Nightreign с The Duskbloods 15 ч.
Трамп отсрочил запрет TikTok в США ещё на 75 дней 16 ч.
Eidos Montreal нацелилась возродить Deus Ex — первые подробности новой игры серии 17 ч.
Microsoft выпустила юбилейные обои для Windows с отсылками к легендарным элементам из прошлого корпорации 18 ч.
Сэм Альтман: GPT-5 задержится, чтобы стать лучше — зато «думающий» ИИ OpenAI o3 выйдет совсем скоро 20 ч.
Режиссёр Elden Ring рассказал, как будет играться The Duskbloods — эксклюзив Nintendo Switch 2 от FromSoftware 20 ч.
PlayStation 5 и Xbox Series X грозит подорожание на 40 % из-за новых пошлин США 8 мин.
Тарифы Трампа приведут к удорожанию производства чипов в США 10 мин.
Apple расширит производство iPhone в Бразилии, чтобы сэкономить на пошлинах 50 мин.
Смартфон Infinix Note 50s 5G+ получит встроенную ароматическую добавку 2 ч.
Марсоход NASA Perseverance стал свидетелем танца «пылевых дьяволов» на Марсе — они не поделили территорию 3 ч.
Первый в истории полёт астронавтов над полюсами Земли завершился — Crew Dragon приводнился в Тихом океане 3 ч.
Samsung снова подала в суд на одного из крупнейших конкурентов — китайскую BOE 4 ч.
Китай вывел чипы за рамки кремния — 32-битный RISC-V-процессор создан на полупроводнике атомарной толщины 4 ч.
Европейский суперкомпьютер Discoverer получил обновление в виде NVIDIA DGX H200 4 ч.
Представлен первый в Китае высокопроизводительный процессор RISC-V для серверов — чип Lingyu 4 ч.