Работа с нейросетями помогла объяснить странные сны «гипотезой переобученного мозга»
Существование снов во всех смыслах будоражит умы человечества уже много тысячелетий. И пока любители эзотерики находили самые разные волшебные объяснения ночным грезам, ученые издревле пытались понять реальное предназначение этих артефактов сознания. Прогресс в подобных начинаниях, бесспорно, достигнут, однако неизведанного по-прежнему немало. Новая гипотеза американского специалиста по нейронаукам предлагает взглянуть на поведение спящего мозга через призму опыта обучения нейросетей — оказывается, у этих процессов много общего.
Эрик Хоэль (Erik Hoel) из Университета Тафтса (США) опубликовал в рецензируемом научном журнале Cell описание своей «гипотезы переобученного мозга» (The overfitted brain hypothesis). Он считает, что центральный орган человеческой нервной системы использует сновидения в качестве инструмента, позволяющего обобщать полученный опыт, а не замыкаться на конкретных типовых ситуациях. Происходит это путем создания как можно более странных образов, вносящих серьезные изменения в знакомую картину. Таким образом мозг отвлекается от однообразных повторяющихся событий или явлений и поддерживает себя в тонусе — готовым к реакции на изменяющуюся обстановку.
Аналогичный эффект переобучения (overfitting) возникает при тренировке нейросетей. Дело в следующем: обученный на определенной выборке алгоритм может настолько сильно «привыкнуть» к ней, что станет хуже работать на реальных примерах, чем должен. То есть модель будет почти идеально объяснять примеры из обучения, но экстраполировать ее «навык» эффективно не получится. А это вообще-то основная цель при создании нейросетей. Чтобы избежать переобучения, применяют так называемое исключение (dropout) — внедрение некоторого количества хаоса в обучающую выборку.
Например, в набор реальных фотографий, по которым тренируют алгоритм автомобильного автопилота, вносят изображения с намеренными искажениями. Это могут быть черные прямоугольники, закрывающие какие-то элементы картинки, или вовсе вырванные из контекста образы. В результате нейросеть создает такие связи, которые обходят незначительные препятствия к восприятию реальной картины. То есть становится ближе к человеческому мозгу. Хоэль предположил, что подобный дропаут может быть не только рукотворным, как в обучении ИИ специалистами, но и природным.
Мозг человека в нормальных условиях не способен полностью отключиться от реальности и перестать ее воспринимать. То есть обучаться. Поэтому во снах он специально создает вроде бы знакомые ситуации, но в них присутствуют искажения. Если мы запоминаем такие сновидения, для нас они выглядят странным бредом. А на уровне нейронных связей — это необходимое расслабление, направляющее непрерывное обучение по более общему пути. В результате мозг меньше зацикливается на однообразных ситуациях и получает возможность анализировать общую картину.
Безусловно, гипотеза Хоэля объясняет лишь один тип сновидений и требует многократной проверки. Но она делает это впечатляюще хорошо, и ей даже есть несколько косвенных подтверждений. Как отмечает портал Neuroscience News, недавно нейрофизиологи достоверно установили, что самый верный способ вызвать определенные сны — многократно повторять новое для человека занятие при бодрствовании. По мнению Эрика, это хороший пример естественного дропаута: мозг устал от повторяющейся ситуации и срочно разгрузил себя искаженным ее воспроизведением ночью.
Госдолг США достиг 40 триллионов долларов и растет все быстрее и быстрее. На Западе переполох: при таких размерах его не выплатить. Следовательно, полагают многие, надо решить проблему как древние шумеры — долг обнулить и начать занимать заново. Рецепт кажется здравым, но есть нюансы. Причем поучительнее всего они даже не для Штатов, а, как ни странно, именно для России.
Обычно место соединения двух деталей, даже из одного материала — слабая точка изделия. Но правильно сваренные друг с другом куски полиэтилена это правило нарушали, хотя ученые и не понимали почему.
Мумии сохраняют следы не только болезней и травм, но и самих процедур, которым подвергали тела после смерти. Компьютерная томография головы мумии, много десятилетий пролежавшей в музее, раскрыла не совсем привычный способ извлечения мозга и другие детали бальзамирования.
Сопротивление жителей Европы самой идее употребления насекомых в пищу может иметь эволюционные корни, уходящие вглубь тысячелетий, пришли к выводу авторы нового исследования. Оказалось, предки современных европейцев ели насекомых лишь эпизодически. Кроме того, из-за генетических мутаций они плохо переваривали их экзоскелеты.
Госдолг США достиг 40 триллионов долларов и растет все быстрее и быстрее. На Западе переполох: при таких размерах его не выплатить. Следовательно, полагают многие, надо решить проблему как древние шумеры — долг обнулить и начать занимать заново. Рецепт кажется здравым, но есть нюансы. Причем поучительнее всего они даже не для Штатов, а, как ни странно, именно для России.
Телескоп «Роман» в несколько раз превосходит любого из своих американских предшественников по числу мегапикселей в матрице и будет отправлять на Землю больше данных, чем любой другой космический телескоп из когда-либо созданных. С его помощью астрономы надеются и прояснить природу темной энергии и материи, и найти немало новых экзопланет — в особенности планет-бродяг
Американская компания Firebird официально запустила в городе Раздан крупный центр обработки данных и фабрику искусственного интеллекта. На сегодняшний день это самый масштабный технологический хаб подобного уровня в СНГ, а после завершения всех этапов строительства он войдет в пятерку самых мощных вычислительных кластеров в мире.
Сопротивление жителей Европы самой идее употребления насекомых в пищу может иметь эволюционные корни, уходящие вглубь тысячелетий, пришли к выводу авторы нового исследования. Оказалось, предки современных европейцев ели насекомых лишь эпизодически. Кроме того, из-за генетических мутаций они плохо переваривали их экзоскелеты.
После сокращения длины очередей и роста доступности бензина в первую неделю августа ситуация снова ухудшилась. Если с 20 июня по начало августа кризис носил в основном психологический характер, то сейчас ситуация принципиально иная: августовские атаки на НПЗ показали, что меры по усилению их противовоздушной обороны не были достаточно полными. Значит, прогноз автора Naked Science от 19 июля о том, что острая фаза кризиса закончится до конца лета, был частично неверным.
Вы попытались написать запрещенную фразу или вас забанили за частые нарушения.
Понятно
Что-то в вашем комментарии показалось подозрительным, поэтому перед публикацией он пройдет модерацию.
Понятно
Из-за нарушений правил сайта на ваш аккаунт были наложены ограничения. Если это ошибка, напишите нам.
Понятно
Наши фильтры обнаружили в ваших действиях признаки накрутки. Отдохните немного и вернитесь к нам позже.
Понятно
Мы скоро изучим заявку и свяжемся с Вами по указанной почте в случае положительного исхода. Спасибо за интерес к проекту.
Понятно
Последние комментарии