Искусственный интеллект DeepMind победил людей в кооперативной игре Quake III Arena
Агенты нейросети тренировались на тысячах игр одновременно, проведя около 450 тысяч матчей.
Сотрудники британской компании DeepMind, которая с 2014 года принадлежит Google, опубликовали статью в журнале Science, посвященную успехам их искусственного интеллекта. На этот раз они смогли натренировать алгоритм на командную игру в режиме «Захват флага» мультиплеерного шутера Quake III Arena. Команда из агентов ИИ в подавляющем количестве игр победила команду людей.
Для тренировки агентов специалисты использовали обучение с подкреплением — метод машинного обучения, при котором система учится, взаимодействуя со средой. Авторы статьи пишут, что этот метод успешно зарекомендовал себя в обучении одного агента, но они хотели узнать, насколько он успешен при командной работе.
В качестве платформы они выбрали мультиплеерный шутер от первого лица Quake III Arena, но задали свои условия игры. Во-первых, карты каждый раз генерируются случайно. Во-вторых, в матче принимают участие только четыре игрока: по два с каждой стороны. Соревнование проходит только в одном режиме — «Захват флага»: каждая из команд должна одновременно защитить свой флаг, захватить флаг оппонентов и принести на свою базу. Реакцию системы снизили до средних показателей человека.
Авторы тренировали 30 агентов. Тренировка происходила благодаря многотысячным параллельным партиям, которые отыгрывали агенты. При этом каждый агент представлял собой индивидуальную единицу, которая действует самостоятельно, исходя из обучения с подкреплением. Специалисты также демонстрируют филогенетическое дерево, которое строится в ходе этого обучения.
После тренировок алгоритмы сыграли несколько партий с командой людей. Обе команды играли на неизвестных для них картах. Пара агентов за игру в среднем захватывала на 16 флагов больше, чем пара людей. Только когда человек играл в партнерстве с искусственным интеллектом, ему удавалось выиграть у объединения алгоритмов (5% вероятности победы).
Профессор Технологического колледжа Джорджии Марк Ридл (Mark Riedl) раскритиковал такой подход британской фирмы, сказав, что агенты не обмениваются сообщениями, а лишь реагируют на те события, которые происходят в игре. Однако представитель DeepMind Макс Джадерберг (Max Jaderberg) возразил:
«[В нашей симуляции] один из агентов сидит в лагере противника, ожидая, когда вновь появится флаг, это возможно только потому, что он полагается на своего партнера по команде».
Джадерберг говорит об одной из тактик искусственного интеллекта, выработанной тем в ходе обучения, которая предполагает ожидание появления нового флага в лагере оппонента. Ее часто используют и люди.
В январе DeepMind сообщила, что ее искусственный интеллект AlphaStar одолел двух профессиональных игроков в стратегию StarCraft II, проходящую в реальном времени.
Лекарство, используемое против вшей и гельминтов, демонстрирует высокую активность против вируса SARS-CoV-2 в культуре клеток.
Помимо проведения успешных доклинических испытаний на грызунах, исследователи из США использовали новый и безболезненный подход для доставки препарата внутрь — массив микроигл, размещенных на поверхности крошечного пластыря.
Новые условия показали, как реакция зависит от размера микропор в конфетах, и сделали ее более понятной на микроуровне.
Массовая противотуберкулезная вакцинация может объяснить пониженную смертность от коронавируса в некоторых странах. Впрочем, из этого правила есть исключения, которые ученые пока не выяснили. Кроме того, не известны биохимические механизмы такой защиты.
Препарат, созданный на основе противомалярийного средства, может помочь безболезненно пройти пик пандемии Covid-19 в России.
Ученые проанализировали порядка 70 тысяч случаев смерти и госпитализации зараженных коронавирусом SARS-CoV-2 и подтвердили, что шансы умереть от болезни Covid-19 сильно зависят от возраста.
Новый анализ образцов лунного грунта показал, что под поверхностью спутника могут скрываться остатки древней планеты Тейя, столкновение которой с Землей и привело к появлению спутника.
Принадлежащие норвежским ВВС американские истребители пятого поколения использовали для перехвата российских боевых самолетов — Ту-142 и МиГ-31.
С начала марта 2020 года по социальным сетям распространяется одна и та же мысль: в России полным-полно больных Covid-19, просто власти занижают медицинскую статистику «на много порядков». Больные гриппом и ОРВИ, считают сторонники этой точки зрения, на самом деле, страдают от коронавируса. Смерти от него тоже «оформят» под грипп и обычную пневмонию. Более того, сходными фальсификациями пытаются объяснить и почти полную победу над эпидемией в Китае. Версия, согласимся, красочная, будоражит воображение. Проверим, совместима ли она с реальностью.
Центр «Архэ» 
Виталий Егоров 
Сколтех 
Гиперион 
Наносемантика 
Умный Красноярск 
InnoSTage 
Рестэк 
ИЦАЭ 
Экспериментаниум 
Дом культуры Льва Лурье 
МЦ СНИД 
DataStart 
Совет молодых ученых 
Университетские субботы 
ООО «ОМГ»
Комментарии