Mais Agentes É Tudo o Que Você Precisa
More Agents Is All You Need
February 3, 2024
Autores: Junyou Li, Qin Zhang, Yangbin Yu, Qiang Fu, Deheng Ye
cs.AI
Resumo
Descobrimos que, simplesmente por meio de um método de amostragem e votação, o desempenho de modelos de linguagem de grande escala (LLMs) escala com o número de agentes instanciados. Além disso, esse método é ortogonal a métodos complicados existentes para aprimorar ainda mais os LLMs, enquanto o grau de aprimoramento está correlacionado com a dificuldade da tarefa. Realizamos experimentos abrangentes em uma ampla gama de benchmarks de LLMs para verificar a presença de nossa descoberta e para estudar as propriedades que podem facilitar sua ocorrência. Nosso código está publicamente disponível em: https://anonymous.4open.science/r/more_agent_is_all_you_need.
English
We find that, simply via a sampling-and-voting method, the performance of
large language models (LLMs) scales with the number of agents instantiated.
Also, this method is orthogonal to existing complicated methods to further
enhance LLMs, while the degree of enhancement is correlated to the task
difficulty. We conduct comprehensive experiments on a wide range of LLM
benchmarks to verify the presence of our finding, and to study the properties
that can facilitate its occurrence. Our code is publicly available at:
https://anonymous.4open.science/r/more_agent_is_all_you_need.