Наука 16 августа 2023

Песню Pink Floyd реконструировали на основе активности мозга слушателей

Далее

Исследователи реконструировали музыку, используя данные ЭЭГ пациентов, которые ее слушали.

Нейробиологи из Калифорнийского университета в Беркли использовали систему ИИ для реконструкции части музыкального произведения на основе активности мозга слушателей. Хотя получившаяся «композиция» не полностью соответствует оригиналу, в ней можно узнать основную мелодию.

Реконструкция песни «Another Brick in the Wall» на основе активности мозга

Ученые использовали данные, собранные во время другого эксперимента более 10 лет назад. 29 пациентам больницы Медицинского центра Олбани на поверхность мозга установили электроды, которые записывали его активность. Пациенты лечились от эпилепсии и параллельно участвовали в научных исследованиях. 

В частности, им включали песню группы Pink Floyd «Another Brick in the Wall» и проверяли, могут ли модели декодирования идентифицировать различные музыкальные произведения и жанры.

Иллюстрация реконструкции песни на основе записи активности мозга. Изображение: Ludovic Bellier and Robert Knight, UC Berkeley

Исследователи из Калифорнийского университета повторно проанализировали старые записи ЭЭГ, чтобы проверить, может ли ИИ использовать данные активности мозга для реконструкции музыки и извлечения дополнительной информации. Эксперимент закончился успехом.

Помимо реконструкции исследователи определили области мозга, участвующие в обнаружении различных музыкальных звуков. Они показали, что некоторые части слуховой коры мозга более чувствительны к ритму или звукам гитары, а другие — к вокалу. Результаты исследования помогут лучше понять устройство мозга и ускорить создание нейроимплантов и качественных интерфейсов мозг — компьютер.


Читать далее:

Выяснилось, какие орехи снижают холестерин и сколько их надо есть в день

Астрофизики построили трехмерную модель ядерного горения звезды

Аэротакси Vertical Aerospace рухнуло во время летных испытаний двигателя

На обложке: Изображение от kjpargeter на Freepik