Neural MMO 2.0: Uma Adição Massivamente Multitarefa ao Aprendizado Massivamente Multiagente
Neural MMO 2.0: A Massively Multi-task Addition to Massively Multi-agent Learning
November 7, 2023
Autores: Joseph Suárez, Phillip Isola, Kyoung Whan Choe, David Bloomin, Hao Xiang Li, Nikhil Pinnaparaju, Nishaanth Kanna, Daniel Scott, Ryan Sullivan, Rose S. Shuman, Lucas de Alcântara, Herbie Bradley, Louis Castricato, Kirsty You, Yuhao Jiang, Qimai Li, Jiaxin Chen, Xiaolong Zhu
cs.AI
Resumo
O Neural MMO 2.0 é um ambiente massivamente multiagente para pesquisa em aprendizado por reforço. A principal característica desta nova versão é um sistema de tarefas flexível que permite aos usuários definir uma ampla gama de objetivos e sinais de recompensa. Desafiamos os pesquisadores a treinar agentes capazes de generalizar para tarefas, mapas e oponentes nunca vistos durante o treinamento. O Neural MMO apresenta mapas gerados proceduralmente com 128 agentes na configuração padrão e suporte para até. A versão 2.0 é uma reescrita completa de sua predecessora, com desempenho três vezes melhor e compatibilidade com o CleanRL. Lançamos a plataforma como software livre e de código aberto, com documentação abrangente disponível em neuralmmo.github.io e uma comunidade ativa no Discord. Para estimular pesquisas iniciais nesta nova plataforma, estamos realizando simultaneamente uma competição na NeurIPS 2023.
English
Neural MMO 2.0 is a massively multi-agent environment for reinforcement
learning research. The key feature of this new version is a flexible task
system that allows users to define a broad range of objectives and reward
signals. We challenge researchers to train agents capable of generalizing to
tasks, maps, and opponents never seen during training. Neural MMO features
procedurally generated maps with 128 agents in the standard setting and support
for up to. Version 2.0 is a complete rewrite of its predecessor with three-fold
improved performance and compatibility with CleanRL. We release the platform as
free and open-source software with comprehensive documentation available at
neuralmmo.github.io and an active community Discord. To spark initial research
on this new platform, we are concurrently running a competition at NeurIPS
2023.