Нейросеть на основе ЭЭГ научилась угадывать, что видит человек

Российские инженеры из МФТИ и компании «Нейроботикс» научили нейросеть в реальном времени воссоздавать изображение, которое видит человек. Эта разработка поможет создать устройство для реабилитации пациентов после инсульта, пишет ТАСС со ссылкой на пресс-службу МФТИ.

Для дальнейшего развития методов лечения нарушений головного мозга ученым необходимо понимать, как в точности работает человеческий мозг. Основная задача состоит в том, чтобы изучить активность мозга и сравнить ее с тем, как человек воспринимает визуальную информацию и что видит в данный момент.

Интерфейс «мозг-компьютер» будет использовать для анализа сигнала с нейронов головного мозга электроэнцефалографию (ЭЭГ) и нейросеть, которая может изучать их.

«Раньше считалось, что исследовать процессы в мозге по ЭЭГ — это все равно, что пытаться узнать устройство двигателя паровоза по его дыму. Мы не предполагали, что в ней содержится достаточно информации, чтобы хотя бы частично реконструировать изображение, которое видит человек. Однако оказалось, что такая реконструкция возможна и демонстрирует хорошие результаты. Более того, на ее основе даже можно создать работающий в реальном времени интерфейс «мозг — компьютер». Это очень обнадеживает. Мы надеемся, что в будущем сможем сделать более доступные нейроинтерфейсы, не требующие имплантации».

Автор работы Григорий Рашков.

В ходе эксперимента исследователи выбрали пять разных категорий роликов с YouTube: «абстракции», «водопады», «лица людей», «скорость» (видеосъемку от первого лица гонок на снегоходах, водных мотоциклах, ралли) и «движущиеся механизмы», так называемые машины Голдберга.

Эти ролики показывались испытуемым, записывая ЭЭГ. Оказалось, что частотные характеристики волновой активности (спектры) ЭЭГ для разных категорий видеороликов различаются. Это позволило обучить нейросеть анализировать реакцию мозга на ролики в режиме реального времени.

Другая нейросеть смогла воссоздавать изображения, которые видели пользователи, в режиме реального времени только по частотам ЭЭГ. Нейросеть пока не смогла точно создать копию видеоролика, однако с ее помощью ученые в 90% угадали категорию ролика.

Подписывайтесь
на наши каналы в Telegram

«Хайтек»новостионлайн

«Хайтек»Dailyновости 3 раза в день

Первая полоса
Генетики воссоздали лицо императора, который правил Китаем 1500 лет назад
Наука
Кремниевое лицо для робота предугадывает и отражает улыбку собеседника
Новости
Яркая вспышка в 800 млн световых лет от Земли показала скрытые «танцы черных дыр»
Космос
Водородный поезд установил мировой рекорд: он проехал 2 803 км без заправки
Новости
«Одноразовый» зонд SLIM пережил уже две экстремальных ночи на Луне
Космос
Разрушение полярных шапок замедляет вращение Земли
Наука
Ученые выяснили, чем еще полезна корица для человека
Наука
Посмотрите на «щит невидимости»: он скрывает человека у всех на виду
Новости
Появился способ омолодить кровь и обратить старение
Наука
Сломанный металлодетектор случайно помог найти золото
Наука
Ученые рассмотрели, что происходит в центре нашей галактики
Космос
ДНК Бетховена удивила ученых: что они выяснили
Наука
Microsoft автоматически устанавливает Copilot на Windows 11: как его удалить
Новости
Tesla хочет внедрить «частный 5G» в электромобили и робота Optimus
Новости
Ученые создали первый в мире алмазный транзистор: он работает при самых высоких температурах
Наука
Моделирование объясняет формирование загадочных голубых сверхгигантов
Космос
Процедура по уходу за волосами привела к повреждению почек у женщины
Новости
Аномальное поведение электронов в графене взволновало физиков
Наука
Интернет может работать в 4 500 000 раз быстрее, показало исследование
Новости
Разработан радар, который контролирует здоровье водителя во время движения
Новости