Neural MMO 2.0 : Une extension massivement multi-tâche pour l'apprentissage massivement multi-agent
Neural MMO 2.0: A Massively Multi-task Addition to Massively Multi-agent Learning
November 7, 2023
Auteurs: Joseph Suárez, Phillip Isola, Kyoung Whan Choe, David Bloomin, Hao Xiang Li, Nikhil Pinnaparaju, Nishaanth Kanna, Daniel Scott, Ryan Sullivan, Rose S. Shuman, Lucas de Alcântara, Herbie Bradley, Louis Castricato, Kirsty You, Yuhao Jiang, Qimai Li, Jiaxin Chen, Xiaolong Zhu
cs.AI
Résumé
Neural MMO 2.0 est un environnement massivement multi-agents dédié à la recherche en apprentissage par renforcement. La caractéristique principale de cette nouvelle version est un système de tâches flexible qui permet aux utilisateurs de définir un large éventail d'objectifs et de signaux de récompense. Nous lançons un défi aux chercheurs : entraîner des agents capables de généraliser à des tâches, des cartes et des adversaires jamais rencontrés pendant l'entraînement. Neural MMO propose des cartes générées de manière procédurale avec 128 agents dans le paramétrage standard et prend en charge jusqu'à [nombre non spécifié]. La version 2.0 est une réécriture complète de son prédécesseur, offrant une performance trois fois supérieure et une compatibilité avec CleanRL. Nous publions cette plateforme en tant que logiciel libre et open-source, accompagnée d'une documentation complète disponible sur neuralmmo.github.io et d'une communauté active sur Discord. Pour stimuler les premières recherches sur cette nouvelle plateforme, nous organisons simultanément un concours lors de NeurIPS 2023.
English
Neural MMO 2.0 is a massively multi-agent environment for reinforcement
learning research. The key feature of this new version is a flexible task
system that allows users to define a broad range of objectives and reward
signals. We challenge researchers to train agents capable of generalizing to
tasks, maps, and opponents never seen during training. Neural MMO features
procedurally generated maps with 128 agents in the standard setting and support
for up to. Version 2.0 is a complete rewrite of its predecessor with three-fold
improved performance and compatibility with CleanRL. We release the platform as
free and open-source software with comprehensive documentation available at
neuralmmo.github.io and an active community Discord. To spark initial research
on this new platform, we are concurrently running a competition at NeurIPS
2023.