Два разных изобретения позволили парализованным выражать мысли ещё быстрее
В двух исследованиях сообщили о достижениях, призванных помочь общению с парализованными. Имплантаты для считывания информации с мозга с помощью искусственного интеллекта (ИИ) позволили двум пациенткам выражать мысли с небывалой для таких случаев точностью и скоростью.
В двух отдельных исследованиях два разных коллектива учёных описали созданные ими интерфейсы мозг-компьютер (ИМК). Публикации о достижениях в один день опубликовал журнал Nature. Разработки преобразуют нейронные сигналы в текст или слова, произносимые синтетическим голосом. Изобретения способны декодировать речь со скоростью 62 и 78 слов в минуту соответственно. Да, здоровый человек обычно разговаривает со скоростью около 160 слов в минуту, однако две новые технологии работают быстрее, чем любые прежние аналоги.

— Фрэнсис Уиллетт, нейробиолог из Стэнфордского университета в Калифорнии, соавтор одной из статей в Nature.
Уиллетт и его коллеги разработали ИМК для интерпретации нейронной активности на клеточном уровне и перевода её в текст. Они помогали 67-летней Пэт Беннетт, страдающей заболеванием двигательных нейронов, также известным как боковой амиотрофический склероз. При таком состоянии прогрессирует потеря мышечного контроля, что приводит к трудностям с передвижением и речью.
Сначала исследователи прооперировали Беннетт, введя на несколько миллиметров маленькие кремниевые электроды в части мозга, которые отвечают за речь. Затем натренировали алгоритмы глубокого обучения, чтобы распознавать уникальные сигналы в мозгу Беннетт, когда она пыталась произносить различные фразы. Пациентка использовала два словарных запаса: большой, из 125 тыс. слов, и малый вокабуляр всего лишь из 50 слов. Затем ИИ расшифровывал слова.
Для словаря из 50 слов ИМК работал в 3,4 раза быстрее, чем более ранний ИМК, разработанный тем же коллективом авторов, и достиг уровня ошибок в 9,1%. Частота ошибок выросла до 23,8% для словарного запаса из 125 тыс. слов. Уиллетт на пресс-конференции пояснил, что при использовании большого вокабуляра примерно три из четырёх слов устройство расшифровывало верно.
Сама пациентка смогла лично пообщаться с журналистами. Пэт Беннетт с помощью ИМК выразила, что открытие означает для способных лишь думать возможность быть на связи с миром и, вероятно, продолжать работать, поддерживать дружеские и семейные отношения.

Во втором исследовании Эдвард Чанг, нейрохирург из Калифорнийского университета в Сан-Франциско, с коллегами работали с 47-летней женщиной по имени Энн, которая утратила способность говорить 18 лет назад после инсульта.
Они использовали иной подход, разместив на поверхности коры головного мозга Энн прямоугольник толщиной с бумагу с 253 электродами. Такой метод называется электрокортикография. Он известен с 1950-х годов и считается менее инвазивным, то есть не столь травмирующим мозг. Электрокортикография позволяет регистрировать совокупную активность тысяч нейронов одновременно. Эдвард Чанг с коллегами обучили алгоритмы ИИ распознавать закономерности в мозговой активности Энн. Пациентка при этом пробовала «произносить» 249 предложений, используя вокабуляр из 1024 слов. Устройство выдавало 78 слов в минуту со средней частотой ошибок в 25,5%.
Чанг и его команда также создали индивидуальные алгоритмы для преобразования сигналов мозга Энн в синтетический голос и анимированный аватар, имитирующий выражение лица. Они изучили её свадебные видеозаписи и настроили звучание программы так, чтобы голос аватара стал похож на собственный голос Энн до её инсульта.
— Энн на сеансе обратной связи с исследователями.
Чанг отметил, что голос — действительно важная часть нашей идентичности. Речь идёт не только об общении, но и о самовыражении личности.
Требуется множество усовершенствований, прежде чем ИМК станут доступны для клинического применения. Энн прямо заявила учёным, что идеальный сценарий — это беспроводное подключение. То есть женщина всё же предпочла бы обойтись без трепанации черепа.
Блез Ивер, исследователь нейротехнологий из Гренобльского института неврологии во Франции, убеждён, что ИМК для повседневного использования должен состоять из полностью имплантируемой системы без видимых разъёмов или кабелей.
— Фрэнсис Уиллетт, нейробиолог из Стэнфордского университета.
Блез Ивер отметил, что имплантаты, используемые командой Уиллетта, точнее фиксируют нейронную активность, так что первый ИМК превосходит второе изобретение за счёт более объёмного словарного запаса. Вместе с тем, считает французский невролог, и с помощью электрокортикографии удалось добиться достаточно высокой точности воссозданной речи.
Свою оценку дала также Джуди Иллес, исследователь нейроэтики из Университета Британской Колумбии в Ванкувере, Канада. Устройства необходимо протестировать на гораздо большем количестве людей, чтобы доказать их надёжность, считает она. Иллес предостерегла, что учёные должны быть осторожны и избегать поспешных обобщений относительно многих других лишённых речи пациентов.
Кристиан Херфф, специалист по вычислительной нейробиологии из Маастрихтского университета, Нидерланды, верит, что новые устройства можно будет приобрести уже в самом ближайшем будущем. Но при этом заметил, что участницы обоих исследований по-прежнему способны задействовать мышцы лица, когда думают о разговоре, и области хх мозга, связанные с речью, не повреждены. То есть возможности ИМК будут доступны не для каждого пациента.
Итак, оба коллектива учёных продолжат повышать скорость и точность своих устройств с помощью более надёжных алгоритмов декодирования мыслей в речь.
В двух отдельных исследованиях два разных коллектива учёных описали созданные ими интерфейсы мозг-компьютер (ИМК). Публикации о достижениях в один день опубликовал журнал Nature. Разработки преобразуют нейронные сигналы в текст или слова, произносимые синтетическим голосом. Изобретения способны декодировать речь со скоростью 62 и 78 слов в минуту соответственно. Да, здоровый человек обычно разговаривает со скоростью около 160 слов в минуту, однако две новые технологии работают быстрее, чем любые прежние аналоги.

Метод первый
Теперь уже можно представить будущее, в котором мы сможем беседовать с парализованным человеком, выслушивая всё, что он хочет сказать, с достаточно высокой точностью, чтобы его можно было безошибочно понять
— Фрэнсис Уиллетт, нейробиолог из Стэнфордского университета в Калифорнии, соавтор одной из статей в Nature.
Уиллетт и его коллеги разработали ИМК для интерпретации нейронной активности на клеточном уровне и перевода её в текст. Они помогали 67-летней Пэт Беннетт, страдающей заболеванием двигательных нейронов, также известным как боковой амиотрофический склероз. При таком состоянии прогрессирует потеря мышечного контроля, что приводит к трудностям с передвижением и речью.
Сначала исследователи прооперировали Беннетт, введя на несколько миллиметров маленькие кремниевые электроды в части мозга, которые отвечают за речь. Затем натренировали алгоритмы глубокого обучения, чтобы распознавать уникальные сигналы в мозгу Беннетт, когда она пыталась произносить различные фразы. Пациентка использовала два словарных запаса: большой, из 125 тыс. слов, и малый вокабуляр всего лишь из 50 слов. Затем ИИ расшифровывал слова.
Для словаря из 50 слов ИМК работал в 3,4 раза быстрее, чем более ранний ИМК, разработанный тем же коллективом авторов, и достиг уровня ошибок в 9,1%. Частота ошибок выросла до 23,8% для словарного запаса из 125 тыс. слов. Уиллетт на пресс-конференции пояснил, что при использовании большого вокабуляра примерно три из четырёх слов устройство расшифровывало верно.
Сама пациентка смогла лично пообщаться с журналистами. Пэт Беннетт с помощью ИМК выразила, что открытие означает для способных лишь думать возможность быть на связи с миром и, вероятно, продолжать работать, поддерживать дружеские и семейные отношения.

Метод второй
Во втором исследовании Эдвард Чанг, нейрохирург из Калифорнийского университета в Сан-Франциско, с коллегами работали с 47-летней женщиной по имени Энн, которая утратила способность говорить 18 лет назад после инсульта.
Они использовали иной подход, разместив на поверхности коры головного мозга Энн прямоугольник толщиной с бумагу с 253 электродами. Такой метод называется электрокортикография. Он известен с 1950-х годов и считается менее инвазивным, то есть не столь травмирующим мозг. Электрокортикография позволяет регистрировать совокупную активность тысяч нейронов одновременно. Эдвард Чанг с коллегами обучили алгоритмы ИИ распознавать закономерности в мозговой активности Энн. Пациентка при этом пробовала «произносить» 249 предложений, используя вокабуляр из 1024 слов. Устройство выдавало 78 слов в минуту со средней частотой ошибок в 25,5%.
Чанг и его команда также создали индивидуальные алгоритмы для преобразования сигналов мозга Энн в синтетический голос и анимированный аватар, имитирующий выражение лица. Они изучили её свадебные видеозаписи и настроили звучание программы так, чтобы голос аватара стал похож на собственный голос Энн до её инсульта.
Тот простой факт, что вы слышите голос, похожий на ваш собственный, волнует. Когда у моей копии появилась способность говорить вместо меня — это было потрясающе!
— Энн на сеансе обратной связи с исследователями.
Чанг отметил, что голос — действительно важная часть нашей идентичности. Речь идёт не только об общении, но и о самовыражении личности.
Критика и применение
Требуется множество усовершенствований, прежде чем ИМК станут доступны для клинического применения. Энн прямо заявила учёным, что идеальный сценарий — это беспроводное подключение. То есть женщина всё же предпочла бы обойтись без трепанации черепа.
Блез Ивер, исследователь нейротехнологий из Гренобльского института неврологии во Франции, убеждён, что ИМК для повседневного использования должен состоять из полностью имплантируемой системы без видимых разъёмов или кабелей.
Мы рассматриваем нашу работу как подтверждение концепции и мотивацию для производителей медоборудования воплотить образец в продукт, который кто-то действительно сможет использовать
— Фрэнсис Уиллетт, нейробиолог из Стэнфордского университета.
Блез Ивер отметил, что имплантаты, используемые командой Уиллетта, точнее фиксируют нейронную активность, так что первый ИМК превосходит второе изобретение за счёт более объёмного словарного запаса. Вместе с тем, считает французский невролог, и с помощью электрокортикографии удалось добиться достаточно высокой точности воссозданной речи.
Свою оценку дала также Джуди Иллес, исследователь нейроэтики из Университета Британской Колумбии в Ванкувере, Канада. Устройства необходимо протестировать на гораздо большем количестве людей, чтобы доказать их надёжность, считает она. Иллес предостерегла, что учёные должны быть осторожны и избегать поспешных обобщений относительно многих других лишённых речи пациентов.
Кристиан Херфф, специалист по вычислительной нейробиологии из Маастрихтского университета, Нидерланды, верит, что новые устройства можно будет приобрести уже в самом ближайшем будущем. Но при этом заметил, что участницы обоих исследований по-прежнему способны задействовать мышцы лица, когда думают о разговоре, и области хх мозга, связанные с речью, не повреждены. То есть возможности ИМК будут доступны не для каждого пациента.
Итак, оба коллектива учёных продолжат повышать скорость и точность своих устройств с помощью более надёжных алгоритмов декодирования мыслей в речь.
- Дмитрий Ладыгин
- youtu.be/--4QfZwS2Rc; pexels.com
Наши новостные каналы
Подписывайтесь и будьте в курсе свежих новостей и важнейших событиях дня.
Рекомендуем для вас
Тайна скифской ДНК: что поразило российских ученых, когда они заглянули в геном легендарных кочевников древности
Оказалось, что 2500 лет подряд историки ошибались в происхождении этого народа. Теории и учебники придется серьезно переписать...
Выход на новый уровень: почему Россия возрождает проводное радио, а Китай давно прокачал этот вид связи
У старой технологии обнаружился огромный потенциал, который поможет миллионам людей...
Запретный остров у берегов Исландии: суша, появившаяся в 1963 году, до сих пор закрыта почти для всех
Но ученым надо поторопиться, уникальный объект исчезает в буквальном смысле на глазах...
Назад в будущее: в России вернут проводное радио. Зачем? Почему спорят эксперты?
В технологию уже вложено более миллиарда рублей, а МЧС называет проводное радио лучшим способом оповещения на сегодня...
Как же на самом деле умерла Клеопатра: почему даже древние историки не смогли прийти к согласию в этом вопросе
Скорее всего, историю об укусе змеи запустил лично император Октавиан, чтобы опорочить египетскую царицу...
Прорыв в берестяных грамотах: 445 неизвестных слов, эффект Лукерьи, реальный русский язык XI–XV веков
Поразительно, но произношение 900-летней давности до сих пор присутствует в нашем языке...
Метеорит и пришельцы ни при чем: российский геолог объяснил происхождение аномалии в сибирской тайге
Кольцевую структуру видно даже со спутника, но добраться до нее крайне сложно...
Америка проигрывает болезни, которую когда-то победила с большим трудом
Положение США усугубляют действия президента Трампа и его чиновников...
Древние деревья помогли раскрыть дело 3500-летней давности: когда пал Вавилон?
Ученые до последнего момента не знали этой даты, потому что в великом городе не было… нормального календаря...
Неожиданный поворот в деле таинственного астероида 1998 KY26: он может быть… потерянным советским зондом
В этом уверен американский астрофизик Аве Лоеб. Какие доказательства предлагает известный ученый?...
Верблюды-вампиры бродили по Америке 13 миллионов лет назад: зачем им вообще понадобились такие жуткие клыки
Ученые говорят: это была эпоха, когда североамериканским континентом правили верблюды...
Не НЛО, но что тогда: ученая объяснила появление светящихся столбов над Барнаулом
Что интересно, это уникальное явление можно увидеть не только зимой и не только в Сибири...
200-летний секрет казненной королевы: почему Мария-Антуанетта была уже обречена на скорую и мучительную гибель
Одежда рассказала не только о последних днях королевы, но и открыла судьбу 9-летнего французского принца...
Куда бить по астероиду, чтобы спасти Землю: ученые рассчитали идеальный ядерный выстрел
Почему раньше так не умели и насколько при выстреле важна форма космического тела...
Эти странные деревья изменили облик всей планеты: в Англии найден самый древний лес в истории
Поразительно, но Земля стала другой всего за 4 миллиона лет. И это событие старше колец Сатурна...