• Добавить в закладки
  • Facebook
  • Twitter
  • Telegram
  • VK
  • Печать
  • Email
  • Скопировать ссылку
16.08.2023, 10:17
Сергей Васильев
4,6 тыс

Ученые реконструировали песню Pink Floyd по активности мозга слушателей

❋ 5.2

Используя массив электродов, чтобы отслеживать работу нескольких участков головного мозга, ученые обучили нейросеть восстанавливать звуки музыки, которую слушает человек. В получившемся аудиофайле вполне можно распознать исходный хит — Another Brick in the Wall.

На концерте Pink Floyd
На концерте Pink Floyd / ©Slovenska touristična organizacija / Автор: Messiena Lucretius

За последние годы мы встречали немало работ, связанных с «чтением мыслей» — реконструкцией слов, картинок и образов по данным об активности нервных клеток в соответствующих участках мозга. Теперь же нейробиологи из Калифорнийского университета в Беркли сумели восстановить музыкальный трек, который прослушивали добровольцы в процессе мониторинга активности их мозга. Статья об этом опубликована в журнале PLOS Biology.

Как правило, к подобным экспериментам привлекают больных, страдающих тяжелой эпилепсией, припадки которых не удается остановить никаким другим способом, кроме как с помощью электродов, помещенных непосредственно в мозг. Людовик Беллье (Ludovic Bellier) и его коллеги нашли 29 таких пациентов, согласившихся стать добровольцами, и имплантировали им массивы из 2668 микроэлектродов.

Фрагмент исходной музыкальной композиции

Далее участники прослушивали несколько классических песен легендарной британской группы Pink Floyd, пока ученые снимали с электродов информацию об активности разных участков их мозга. Анализ собранных данных показал, что с музыкой коррелировали показания 347 электродов, в основном расположенных в верхней височной и нижней лобной извилинах, а также в складках сенсомоторной коры. Само по себе это неудивительно, поскольку известно, что все эти области вовлечены в восприятие и интерпретацию звуков, включая музыку и речь.

Фрагмент реконструированного трека

Однако Беллье и его коллегам удалось создать и обучить математическую модель на базе ИИ, которая интерпретировала данные об активности мозга и реконструировала один из исходных музыкальных треков — хит 1979 года Another Brick in the Wall («Еще один кирпич в стене»). Получившийся аудиофайл далек от настоящего хита — слова практически неразличимы, звук доносится будто из бочки, но в целом мелодия и ритм вполне узнаваемы.

Чтобы лучше разобраться в том, какие области мозга участвуют в распознавании разных особенностей музыки, реконструкцию повторили несколько раз, без использования данных от разных групп электродов. Это позволило идентифицировать участок верхней височной извилины, который ответствен за восприятие ритма: его «отключение» приводило к генерации трека без партии ритм-гитары. Вообще, оказалось, что именно эта извилина играет ключевую роль в обработке музыки, и без данных с нее трек получался наименее похожим на исходный.

Нашли опечатку? Выделите фрагмент и нажмите Ctrl + Enter.
Подписывайтесь на нас в Telegram, Яндекс.Новостях и VK
Предстоящие мероприятия
4 марта, 13:56
Илья Гриднев

Биологи получили прямые доказательства поедания косатками представителей собственного вида. Оторванные спинные плавники со следами больших зубов указали на охоту плотоядных китообразных на слабую соседнюю популяцию. Угроза смертельных нападений заставила рыбоядные группы косаток создавать неразлучные семейные кланы.

5 марта, 09:47
Игорь Байдов

За право называть себя родиной легендарных скрипок Страдивари долгие годы спорили несколько европейских стран. Исследователи из Швейцарии, Франции, Словении заявляли, что именно их леса послужили материалом для инструментов с неповторимым звучанием. Теперь история получила новый поворот. Международная команда изучила годичные кольца почти на 300 скрипках итальянского мастера и выяснила, в каком конкретно места Страдивари брал материал для своих лучших творений.

4 марта, 14:46
Адель Романова

Исследователи смоделировали последствия распыления в марсианской атмосфере аэрозолей для создания искусственного парникового эффекта. Выяснилось, что это может привести к парадоксальному результату: вместо ожидаемого более комфортного климата будущая колония на «нагретой» Красной планете окажется посреди такого же лютого холода и притом окружена обезвоженным грунтом.

3 марта, 14:06
Александр Березин

В ноябре 2025 года при взлете российской ракеты с Байконура к МКС с существенной высоты упала кабина обслуживания 8У216. Поскольку в 2010-х годах из экономии средств у нас отказались от дублирования стартовых площадок, это создало ситуацию временной невозможности пилотируемых полетов. Теперь, всего через три месяца после происшествия, «Роскосмос» смог решить проблему, поставив запасную кабину обслуживания, найденную на складах Минобороны. Весенние пуски к МКС, запланированные ранее, теперь имеют шансы пройти в срок.

28 февраля, 16:50
Игорь Байдов

В той части Пиренеев, которые находятся на территории Испании, исследователи обнаружили первые доказательства добычи золота в эпоху Римской империи. На месте древних рудников нашли сложные гидравлические сооружения и остатки водохранилища, возраст которых определили с помощью метода оптического датирования. Открытие прольет свет на инженерные приемы римлян и поставит точку в многолетнем споре: действительно ли римляне добывали золото в этом регионе.

28 февраля, 11:53
Андрей Серегин

Разное отношение домашних животных к хозяевам давно стало предметом споров, обсуждений и шуток. Ученые из Венгрии показали, что собаки демонстрируют по отношению к человеку уровень альтруизма, сходный с детским, тогда как кошки ищут в партнерстве с человеком прежде всего свою выгоду.

12 февраля, 07:52
Адель Романова

Астрономы недавно проанализировали базу данных о падающих на Землю объектах и пришли к выводу, что два из них прибыли из межзвездного пространства. Известна не только дата, но и место падения каждого из них.

12 февраля, 08:19
Полина Меньшова

«Любить лишь можно только раз», — писал поэт Сергей Есенин, а герои культовых сериалов приходили к выводу, что «настоящая» влюбленность случается в жизни максимум дважды. Однако ни один из этих тезисов не подкреплен научными данными. Американские исследователи подошли к вопросу иначе: опросили более 10 тысяч человек и вывели среднее число сильных влюбленностей, возможных в течение жизни.

3 марта, 14:06
Александр Березин

В ноябре 2025 года при взлете российской ракеты с Байконура к МКС с существенной высоты упала кабина обслуживания 8У216. Поскольку в 2010-х годах из экономии средств у нас отказались от дублирования стартовых площадок, это создало ситуацию временной невозможности пилотируемых полетов. Теперь, всего через три месяца после происшествия, «Роскосмос» смог решить проблему, поставив запасную кабину обслуживания, найденную на складах Минобороны. Весенние пуски к МКС, запланированные ранее, теперь имеют шансы пройти в срок.

[miniorange_social_login]

Комментарии

Написать комментарий
Подтвердить?
Подтвердить?
Причина отклонения
Подтвердить?
Не получилось опубликовать!

Вы попытались написать запрещенную фразу или вас забанили за частые нарушения.

Понятно
Жалоба отправлена

Мы обязательно проверим комментарий и
при необходимости примем меры.

Спасибо
Аккаунт заблокирован!

Из-за нарушений правил сайта на ваш аккаунт были наложены ограничения. Если это ошибка, напишите нам.

Понятно
Что-то пошло не так!

Наши фильтры обнаружили в ваших действиях признаки накрутки. Отдохните немного и вернитесь к нам позже.

Понятно
Лучшие материалы
Закрыть
Войти
Регистрируясь, вы соглашаетесь с правилами использования сайта и даете согласие на обработку персональных данных.
Ваша заявка получена

Мы скоро изучим заявку и свяжемся с Вами по указанной почте в случае положительного исхода. Спасибо за интерес к проекту.

Понятно