Нейросеть на основе ЭЭГ научилась угадывать, что видит человек

Российские инженеры из МФТИ и компании «Нейроботикс» научили нейросеть в реальном времени воссоздавать изображение, которое видит человек. Эта разработка поможет создать устройство для реабилитации пациентов после инсульта, пишет ТАСС со ссылкой на пресс-службу МФТИ.

Для дальнейшего развития методов лечения нарушений головного мозга ученым необходимо понимать, как в точности работает человеческий мозг. Основная задача состоит в том, чтобы изучить активность мозга и сравнить ее с тем, как человек воспринимает визуальную информацию и что видит в данный момент.

Интерфейс «мозг-компьютер» будет использовать для анализа сигнала с нейронов головного мозга электроэнцефалографию (ЭЭГ) и нейросеть, которая может изучать их.

«Раньше считалось, что исследовать процессы в мозге по ЭЭГ — это все равно, что пытаться узнать устройство двигателя паровоза по его дыму. Мы не предполагали, что в ней содержится достаточно информации, чтобы хотя бы частично реконструировать изображение, которое видит человек. Однако оказалось, что такая реконструкция возможна и демонстрирует хорошие результаты. Более того, на ее основе даже можно создать работающий в реальном времени интерфейс «мозг — компьютер». Это очень обнадеживает. Мы надеемся, что в будущем сможем сделать более доступные нейроинтерфейсы, не требующие имплантации».

Автор работы Григорий Рашков.

В ходе эксперимента исследователи выбрали пять разных категорий роликов с YouTube: «абстракции», «водопады», «лица людей», «скорость» (видеосъемку от первого лица гонок на снегоходах, водных мотоциклах, ралли) и «движущиеся механизмы», так называемые машины Голдберга.

Эти ролики показывались испытуемым, записывая ЭЭГ. Оказалось, что частотные характеристики волновой активности (спектры) ЭЭГ для разных категорий видеороликов различаются. Это позволило обучить нейросеть анализировать реакцию мозга на ролики в режиме реального времени.

Другая нейросеть смогла воссоздавать изображения, которые видели пользователи, в режиме реального времени только по частотам ЭЭГ. Нейросеть пока не смогла точно создать копию видеоролика, однако с ее помощью ученые в 90% угадали категорию ролика.

Подписывайтесь
на наши каналы в Telegram

«Хайтек»новостионлайн

«Хайтек»Dailyновости 3 раза в день

Первая полоса
Антидот от 13 ядовитых змей получили из крови донора, которого укусили 856 раз
Наука
Телескоп «Чандра» наблюдал причину «перелома кости» в центре Млечного Пути
Космос
Оптический транзистор разогнали до 240 ГГц: это основа для компьютеров нового поколения
Новости
Google бросает вызов ChatGPT: в поисковике появилась вкладка с ИИ
Новости
Посмотрите, как рождаются планеты: опубликованы самые четкие изображения в истории
Космос
Рыбы в виртуальной реальности обучают роботов двигаться косяками
Новости
У мертвой звезды нашли самую холодную из известных планет
Космос
После обновления ChatGPT стал подхалимом: OpenAI объяснила, что случилось
Новости
«Википедия» внедрит ИИ: это будет работать и что станет с редакторами
Новости
Поднимет и авианосец: для реактора ИТЭР сделали мощнейший магнит в мире
Наука
Посмотрите на маневренный дрон с крыльями, как у белки-летяги
Новости
Недалеко от Земли нашли странную группу молодых звезд, стремящихся разлететься в разные стороны
Космос
Летучие мыши учатся подслушивать за сексом лягушек, чтобы выбрать добычу
Наука
В МФТИ разработана технология для создания долговечной памяти электронных устройств
Наука
Зонд «Юнона» рассмотрел холодный северный полюс Юпитера
Космос
Роботы-собаки Unitree стреляют водой на 60 метров, чтобы тушить пожары
Новости
Самки бонобо научились держать самцов «в узде»: как им удалось
Наука
Снайперы застрелили с вертолетов 700 коал: власти Австралии объяснили, зачем это сделали
Наука
Бесплатную смену по подготовке к ЕГЭ проведут в Университете Иннополис 
Новости
Назван неожиданный напиток, который может снизить риск остановки сердца
Наука