ИИ смог перевести мозговые сигналы в предложения почти без ошибок

Искусственный интеллект (ИИ) смог перевести мозговые сигналы в предложения почти без ошибок. Эта система в будущем поможет восстановить речь пациентам, которые потеряли способность говорить из-за болезни.

Джозеф Макин из Калифорнийского университета и его коллеги использовали алгоритмы глубокого обучения для изучения мозговых сигналов четырех пациенток. Все они страдали эпилепсией, поэтому к ним уже прикрепили мозговые электроды, которые передавали данные о судорогах.

Каждую женщину попросили прочитать вслух набор предложений, в то же время команда фиксировала активность их мозга. Самая большая группа предложений содержала 250 уникальных слов. Команда подавала эту мозговую активность в алгоритм нейронной сети, обучая ее выявлять регулярно возникающие закономерности, которые могут быть связаны с повторяющимися аспектами речи — например, сочетанием гласных и согласных букв. Затем эти паттерны подавались во вторую нейронную сеть, которая пыталась превратить их в слова, чтобы сформировать предложения.

Каждый раз, когда человек говорит одно и то же предложение, мозговая деятельность будет схожа, но не идентична, объяснили исследователи. «Запоминание мозговой активности человека во время чтения предложений не поможет, поэтому алгоритм вместо этого должен понять, что схожего в паттернах и обобщить эти данные», — отмечает Макин.

Во время тестов наилучшие результаты ИИ содержали в себе лишь 3% ошибок. Исследователи уверены, что алгоритму помогло то, что пациентки зачитывали простые предложения с небольшим количеством уникальных слов. Но в некоторых случаях ИИ смог разобрать и отличить схожие по звучанию слова только по мозговой активности (например, cлова Tina и Turner).

Команда попробовала декодировать данные мозговых сигналов сразу в отдельные предложения. Но коэффициент ошибок сразу вырос до 38%. Исследователи отмечают, что пока ИИ не может быстро справиться с этой задачей. «Обычно люди знают и используют до 350 тыс. слов, но алгоритм не может их все расшифровать. Развивать его возможности будет невероятно трудно», — отмечают ученые.

Ранее в России создали нейросеть для диагностики COVID-19 по медицинским снимкам с точностью до 80%. Разработкой занимались ученые из Университета Иннополис, рассказали «Хайтеку» в пресс-службе университета.

Подписывайтесь
на наши каналы в Telegram

«Хайтек»новостионлайн

«Хайтек»Dailyновости 3 раза в день

Первая полоса
Новый закон об иностранных мессенджерах вступил в силу в России
Новости
Больше миллиона Гбит в секунду: японцы побили рекорд скорости передачи данных по оптоволокну
Новости
Хаос во благо: физики создали новый инструмент для квантового мира
Наука
Hugging Face выпустила недорогих человекоподобных роботов с открытым кодом
Новости
Китайский аккумулятор для электромобиля выдержал наезд 36-тонного танка
Новости
Воспитанники детских домов изучат основы работы с нейросетями
Новости
Четвероногий робот из Цюриха научился играть в бадминтон с людьми
Новости
В MIT раскрыли механизм набора веса из-за жирной пищи и как обратить его вспять
Наука
60 000 лет рядом: ученые выяснили, кто стал первым паразитом человека
Наука
Ректора Университета Иннополис избрали членом-корреспондентом РАН
Иннополис
В Корее робопса научили паркуру и бегу по стенам: посмотрите, что он может
Новости
Древний череп «человека-муравья» нашли в Аргентине
Наука
На селфи марсохода попал неожиданный объект: его заметили не сразу
Космос
Посмотрите на двух морских коньков, которых застукали за «поцелуем» в океане
Наука
Почти 10 000 роутеров Asus тайно заразили: как проверить свой и защититься
Новости
Ракета будет доставлять товары с AliExpress за час по всему миру: ее испытали в Китае
Новости
В России пригрозили «душить» иностранные сервисы: кто в опасности
Новости
Boston Dynamics усовершенствовала систему восприятия гуманоидного робота Atlas
Новости
Наклейка на лоб анализирует мозговые волны и предсказывает переутомление
Наука
Посмотрите на робота-трансформера, который меняет форму прямо в полете
Новости