• Добавить в закладки
  • Facebook
  • Twitter
  • Telegram
  • VK
  • Печать
  • Email
  • Скопировать ссылку
02.05.2023, 10:13
Сергей Васильев
1
4,6 тыс

ИИ научился читать мысли по данным томографии

❋ 5.8

Аналогичная ChatGPT нейросеть впервые смогла реконструировать мысли человека без использования инвазивных электродов, но только если он сам этого хочет.

Александр Хат и его коллеги отправляют одного из своих подопытных в томограф
Александр Хат и его коллеги отправляют одного из своих подопытных в томограф / ©Nolan Zunk, University of Texas at Austin / Автор: Андрей Чернов

Ученые из Техасского университета в Остине представили «семантический декодер» — систему, которая использует языковую модель для анализа снимков МРТ и «расшифровки» мыслей. В отличие от прошлых аналогичных проектов, она не требует снимать данные об активности нейронов с помощью электродов, которые приходится имплантировать в мозг. Декодеру достаточно снимков, сделанных обычным томографом. Об этом рассказывается в новой статье, опубликованной в журнале Nature Neuroscience.

Функциональная магнитно-резонансная томография (фМРТ) позволяет определять активность нейронов головного мозга по усилению тока крови, который необходим для снабжения их кислородом. Томограф получает высококачественные снимки с высоким разрешением, однако с частотой лишь около десяти секунд. За это время — вслух или мысленно — человек успевает произнести около 20 слов. Именно поэтому для интерпретации данных фМРТ потребовалось привлечь крупномасштабную языковую модель-трансформер, подобную знаменитым системам Bard от Google или ChatGPT от OpenAI.

Александр Хат (Alexander Huth) и его коллеги обучали нейросеть на данных фМРТ трех добровольцев, активность мозга которых отслеживали по 16 часов, во время чтения аудиокниг. В результате модель смогла определять нейронные паттерны, активирующиеся в ответ на разные последовательности слов, а не каждое слово по отдельности. Иначе говоря, «семантический декодер» реконструирует скорее общий смысл мыслей, а не точное содержание, слово за словом.

Слева — примеры текстов, которые слушали добровольцы, справа — результаты расшифровки их мозговой активности нейросетью. Голубым выделены точно совпадающие фрагменты, фиолетовым — совпадающие по смыслу, красным — ошибки в реконструкции нейросети
Слева — примеры текстов, которые слушали добровольцы, справа — результаты расшифровки их мозговой активности нейросетью. Голубым выделены точно совпадающие фрагменты, фиолетовым — совпадающие по смыслу, красным — ошибки в реконструкции нейросети / ©University of Texas at Austin

Тем не менее точность этой работы оказывается довольно приличной для неинвазивного метода, не способного регистрировать активность отдельных нейронов и в реальном времени. Например, фраза «Я еще не получил водительские права» превращается в «Она еще не начала учиться водить».

Более того, ИИ с успехом справлялся с такой расшифровкой и в более сложных обстоятельствах: например, если человек мог слышать одновременно два текста, но мысленно концентрировался только на одном из них или просто про себя проговаривал фразы. Даже при демонстрации видеороликов (без звука) активность нейронов, зарегистрированная фМРТ, позволила нейросети реконструировать последовательность событий на записи.

Впрочем, опасаться поголовного и бесконтрольного чтения мыслей с помощью ИИ пока не стоит. Во-первых, система должна отдельно обучаться на данных томографии каждого человека индивидуально. Во-вторых, подопытный должен фокусироваться на соответствующих мыслях, активно помогая нейросети: без этого она работать не способна. В случаях, когда подопытных просили намеренно отвлекаться, ИИ продемонстрировал крайне низкую точность расшифровки фМРТ. Однако в медицине — например, для помощи парализованным пациентам, которые остаются в сознании — декодер может оказаться исключительно полезным.

Нашли опечатку? Выделите фрагмент и нажмите Ctrl + Enter.
Подписывайтесь на нас в Telegram, Яндекс.Новостях и VK
Предстоящие мероприятия
17 июля, 15:20
ФизТех

Большой коллектив ученых из Специальной астрофизической обсерватории РАН (п. Нижний Архыз), Астрокосмического центра ФИАН, Крымской астрофизической обсерватории РАН, Санкт-Петербургского государственного университета и МФТИ с коллегами впервые провел комплексный многоволновой анализ переменности блазара Тон 599 за период с 1983 по 2025 год и обнаружил в этих данных скрытый ритм, указывающий на работу двух взаимосвязанных механизмов.

16 июля, 15:12
Evgenia Vavilova

Процессы, сопровождающие жизнь черных дыр, интересуют не только теоретиков. Ученые уже знают, что энергия и частицы могут покидать черные дыры и теперь работают над способами эту энергию использовать.

17 июля, 17:59
Марк Чернов

Популярная острая специя, которую многие добавляют в еду каждый день, может пагубно сказываться на здоровье. Масштабный анализ медицинских данных показал, что у любителей экстремально острой пищи риск развития рака пищевода возрастает почти в три раза.

16 июля, 15:12
Evgenia Vavilova

Процессы, сопровождающие жизнь черных дыр, интересуют не только теоретиков. Ученые уже знают, что энергия и частицы могут покидать черные дыры и теперь работают над способами эту энергию использовать.

12 июля, 12:24
Марк Чернов

Ученые выяснили, почему интервальное голодание для многих оказывается эффективнее обычных диет. Исследование показало, что ограничение времени для приема пищи избавляет худеющего от изнуряющего ощущения жесткого контроля и при этом позволяет сбросить ровно столько же, сколько при скрупулезном подсчете калорий.

13 июля, 20:02
Evgenia Vavilova

Деревья растут и люди стареют не потому, что идет время, а из-за происходящих внутри них процессов. Но можно ли сказать, что именно эти процессы порождают время? Ученый создал маленькую Вселенную, в которой дела обстоят именно так.

25 июня, 16:20
Любовь С.

Вселенная может оказаться «замкнутой» глобальной структурой, где свет от далеких галактик способен возвращаться к наблюдателю с разных направлений. Именно такой сценарий не удалось исключить авторам нового масштабного обзора. Проверить его предсказания астрономы смогут уже в ближайшие годы.

25 июня, 15:09
Марк Чернов

Ученые впервые на молекулярном уровне доказали, что обычная вода одновременно состоит из двух разных жидких состояний — более плотного и менее плотного, которые непрерывно сменяют друг друга. Раз молекулярная «двойственность» действительно существует, это подтверждает спорную 30-летнюю гипотезу. Новое открытие поможет, наконец, объяснить десятки «странных» физических аномалий воды, включая ее расширение при замерзании и парадоксальное изменение вязкости под давлением.

9 июля, 13:06
Редакция Naked Science

Видеосервисы стали неотъемлемой частью жизни россиян. В 2026 году охваты большинства платформ продолжают расти, в том числе YouTube.

[miniorange_social_login]

Комментарии

1 Комментарий
D M
02.05.2023
все, началось