С 2009 по 2015 год 29 пациентов с эпилепсией приняли участие в исследовании, в ходе которого ученые записали их мозговую активность во время прослушивания трехминутного фрагмента песни Pink Floyd 1979 года «Another Brick in the Wall (Part 1)».
Ученые воссоздали отрывок песни Pink Floyd по записям активности мозга во время его прослушивания
Что происходит в мозге, когда человек слушает музыку? В новом исследовании ученым удалось реконструировать песню, которую слушали участники, только по паттернам активности мозга. Вы тоже можете ее послушать!
Unsplash
Команда использовала искусственный интеллект, который реконструировал музыку по паттернам активности мозга, записанным во время прослушивания
В то время исследователи из Калифорнийского университета в Беркли пытались найти способ распознать слова, которые слышат пациенты. Теперь ученые вернулись к записям, чтобы попытаться реконструировать музыку.
Рок в голове
В новом исследовании, опубликованном в PLOS Biology, ученые повторно проанализировали записи и использовали искусственный интеллект для декодирования активность мозга в слуховой коре и восстановления формы звуковой волны, услышанной человеком.
Вот, что из этого вышло:
В полученной аудиозаписи приглушенный звук. Но в ней узнаются знакомые ритм и мелодия, а также можно разобрать строчку: All in all it was just a brick in the wall (перевод: «В общем, это был просто кирпич в стене»).
По словам исследователей, использование электродов с более высокой плотностью может улучшить качество реконструкции записи. Они также считают, что этот процесс можно воспроизвести и без инвазивного вмешательства – просто нужны более чувствительные датчики, которые будут крепиться на кожу головы. Однако рассуждать об этом пока рано.