Компьютер освоил тактику StarCraft
Международная группа ученых разработала компьютерную программу, которая самостоятельно научилась тактикам игры в StarCraft, характерным для опытных геймеров.
Последние разработки в области искусственного интеллекта позволили создать алгоритмы, которые способны превосходить человека в различных играх. Так, ранее программа AlphaGo победила одного из сильнейших игроков мира в го. В январе 2017 года программа Libratus впервые одолела четырех профессиональных игроков в покер в рамках 20-дневного турнира Brains Vs. Artificial Intelligence: Upping the Ante. Однако в некоторых играх с неполной информацией, в частности в StarCraft, машины по-прежнему уступают человеку.
В новой статье сотрудники китайской компании Alibaba Group и Университетского колледжа Лондона описали прогресс программы, которая использует для обучения двунаправленно-скоординированную сеть (BiCNet) на базе рекуррентных нейросетей. По мнению исследователей, алгоритм оптимально подходит для взаимодействия и тренировки с несколькими агентами.
Представленная программа самостоятельно освоила микроконтроль юнитов во время ведения боя в StarCraft. На этапе обучения авторы использовали тестовые сражения: например, с тремя пехотинцами против зерлинга с большим запасом здоровья. В первых матчах пехотинцы, убегая от противника, сталкивались друг с другом, но спустя более чем 40 тысяч шагов и 50 сессий они научились эффективно разбегаться. Помимо относительно свободного перемещения агентов в ситуации столкновения с врагом программа также научилась разным тактикам ведения боя. Например, она освоила тактику «Ударил-убежал», которая заключается в дистанционной атаке противника с удержанием условно безопасного расстояния. Кроме того, компьютер начал использовать более сложный маневр — атаку прикрывающим огнем, когда юниты временно придерживаются тактики «Ударил-убежал», но продолжают вести сосредоточенный огонь после того, как противник выбрал одного из них в качестве основной мишени.
Также разработчики показали, что программа научилась сосредоточенному огню по отдельным целям малыми группами, что повышает эффективность уничтожения юнитов противника. Компьютерный игрок освоил и ведение боя с поправкой на возможности разных классов агентов: так, он использовал десантные корабли, чтобы скрыть танки от ультралисков и рассредоточил своих юнитов во время боя с муталисками — это снизило риск поражения снарядами-симбионтами сразу нескольких юнитов. Между тем отмечается, что активный микроконтроль повышает вероятность победы в бою, однако помимо этого StarCraft предполагает принятие стратегических решений, в том числе об оборудовании баз и распределении ресурсов. Более широко оценить успехи программы можно будет после испытаний на специальных соревнованиях Starcraft AI Competition.
Исследование опубликовано на сервере препринтов arXiv.org.
Ранее психологи определили критерии, которые отличают опытных игроков в StarCraft. Кроме освоения горячих клавиш с мастерством оказались связаны скорость действий и уникальный стиль игры.
Telegram 
Дзен 
VK Кит живет двести лет, умеет пробивать головой полуметровый лед и поет океанский джаз голосом несмазанной дверной петли. Охотоморские гренландские киты — это не просто многотонные ледоколы. Это древние узники, которые остались жить в Охотском море со времен последнего оледенения. Это счастливцы, которые смогли пережить гарпуны китобоев XIX-XX веков, но сегодня уязвимы не меньше. Чтобы спасти этих поразительных китов, российским ученым и команде фонда «Природа и люди» приходится: считать хвосты, читать биографии по шрамам, прятать подростков от хищников, стрелять (спутниковыми метками) с парамоторов и тяжелых дронов. Рассказываем, как устроена жизнь гренландских китов России и кто помогает им не исчезнуть навсегда с лица планеты.
Деревья растут и люди стареют не потому, что идет время, а из-за происходящих внутри них процессов. Но можно ли сказать, что именно эти процессы порождают время? Ученый создал маленькую Вселенную, в которой дела обстоят именно так.
Ученые выяснили, что золото владеет уникальной «техникой самообороны», которая защищает его от потускнения. Оказалось, атомы на поверхности этого металла способны самостоятельно перестраиваться в особые защитные структуры. Такой невидимый барьер блокирует контакт с кислородом и подавляет процесс окисления в триллион раз эффективнее, чем поверхность любого другого металла.
Кит живет двести лет, умеет пробивать головой полуметровый лед и поет океанский джаз голосом несмазанной дверной петли. Охотоморские гренландские киты — это не просто многотонные ледоколы. Это древние узники, которые остались жить в Охотском море со времен последнего оледенения. Это счастливцы, которые смогли пережить гарпуны китобоев XIX-XX веков, но сегодня уязвимы не меньше. Чтобы спасти этих поразительных китов, российским ученым и команде фонда «Природа и люди» приходится: считать хвосты, читать биографии по шрамам, прятать подростков от хищников, стрелять (спутниковыми метками) с парамоторов и тяжелых дронов. Рассказываем, как устроена жизнь гренландских китов России и кто помогает им не исчезнуть навсегда с лица планеты.
Ученые выяснили, почему интервальное голодание для многих оказывается эффективнее обычных диет. Исследование показало, что ограничение времени для приема пищи избавляет худеющего от изнуряющего ощущения жесткого контроля и при этом позволяет сбросить ровно столько же, сколько при скрупулезном подсчете калорий.
Деревья растут и люди стареют не потому, что идет время, а из-за происходящих внутри них процессов. Но можно ли сказать, что именно эти процессы порождают время? Ученый создал маленькую Вселенную, в которой дела обстоят именно так.
Вселенная может оказаться «замкнутой» глобальной структурой, где свет от далеких галактик способен возвращаться к наблюдателю с разных направлений. Именно такой сценарий не удалось исключить авторам нового масштабного обзора. Проверить его предсказания астрономы смогут уже в ближайшие годы.
Ученые впервые на молекулярном уровне доказали, что обычная вода одновременно состоит из двух разных жидких состояний — более плотного и менее плотного, которые непрерывно сменяют друг друга. Раз молекулярная «двойственность» действительно существует, это подтверждает спорную 30-летнюю гипотезу. Новое открытие поможет, наконец, объяснить десятки «странных» физических аномалий воды, включая ее расширение при замерзании и парадоксальное изменение вязкости под давлением.
Американские ветеринары установили, что длина шага передних лап у пожилых собак отражает возрастные изменения в работе мозга. Когда у собак развивается деменция, шаги их передних лап становятся короче, причем эта связь не зависит от хронической боли в суставах.
Вы попытались написать запрещенную фразу или вас забанили за частые нарушения.
Понятно
Что-то в вашем комментарии показалось подозрительным, поэтому перед публикацией он пройдет модерацию.
Понятно
Из-за нарушений правил сайта на ваш аккаунт были наложены ограничения. Если это ошибка, напишите нам.
Понятно
Наши фильтры обнаружили в ваших действиях признаки накрутки. Отдохните немного и вернитесь к нам позже.
Понятно
Мы скоро изучим заявку и свяжемся с Вами по указанной почте в случае положительного исхода. Спасибо за интерес к проекту.
Понятно
Последние комментарии