Neural MMO 2.0: Масштабное расширение многозадачности в обучении с множеством агентов
Neural MMO 2.0: A Massively Multi-task Addition to Massively Multi-agent Learning
November 7, 2023
Авторы: Joseph Suárez, Phillip Isola, Kyoung Whan Choe, David Bloomin, Hao Xiang Li, Nikhil Pinnaparaju, Nishaanth Kanna, Daniel Scott, Ryan Sullivan, Rose S. Shuman, Lucas de Alcântara, Herbie Bradley, Louis Castricato, Kirsty You, Yuhao Jiang, Qimai Li, Jiaxin Chen, Xiaolong Zhu
cs.AI
Аннотация
Neural MMO 2.0 — это масштабная среда с множеством агентов для исследований в области обучения с подкреплением. Ключевой особенностью этой новой версии является гибкая система задач, которая позволяет пользователям определять широкий спектр целей и сигналов вознаграждения. Мы предлагаем исследователям обучить агентов, способных обобщать знания для задач, карт и противников, не встречавшихся во время обучения. Neural MMO включает процедурно генерируемые карты с 128 агентами в стандартной конфигурации и поддержку большего количества. Версия 2.0 представляет собой полную переработку предыдущей версии с трехкратным улучшением производительности и совместимостью с CleanRL. Мы выпускаем платформу как бесплатное и открытое программное обеспечение с подробной документацией, доступной на сайте neuralmmo.github.io, и активным сообществом в Discord. Для стимулирования начальных исследований на этой новой платформе мы одновременно проводим соревнование на конференции NeurIPS 2023.
English
Neural MMO 2.0 is a massively multi-agent environment for reinforcement
learning research. The key feature of this new version is a flexible task
system that allows users to define a broad range of objectives and reward
signals. We challenge researchers to train agents capable of generalizing to
tasks, maps, and opponents never seen during training. Neural MMO features
procedurally generated maps with 128 agents in the standard setting and support
for up to. Version 2.0 is a complete rewrite of its predecessor with three-fold
improved performance and compatibility with CleanRL. We release the platform as
free and open-source software with comprehensive documentation available at
neuralmmo.github.io and an active community Discord. To spark initial research
on this new platform, we are concurrently running a competition at NeurIPS
2023.