AI Scientist-v2: Автоматизированное научное открытие на уровне лаборатории с помощью агентного поиска по дереву

The AI Scientist-v2: Workshop-Level Automated Scientific Discovery via Agentic Tree Search

April 10, 2025

Авторы: Yutaro Yamada, Robert Tjarko Lange, Cong Lu, Shengran Hu, Chris Lu, Jakob Foerster, Jeff Clune, David Ha

cs.AI

Аннотация

Искусственный интеллект (ИИ) играет всё более важную роль в трансформации процесса научных открытий. Мы представляем The AI Scientist-v2 — сквозную агентную систему, способную создавать первые полностью сгенерированные ИИ научные работы, принятые на рецензируемых семинарах. Эта система итеративно формулирует научные гипотезы, проектирует и проводит эксперименты, анализирует и визуализирует данные, а также автономно пишет научные статьи. По сравнению с её предшественником (v1, Lu et al., 2024, arXiv:2408.06292), The AI Scientist-v2 устраняет зависимость от шаблонов кода, созданных человеком, эффективно обобщает знания в различных областях машинного обучения и использует новую прогрессивную методику агентного поиска по дереву, управляемую специальным агентом-менеджером экспериментов. Кроме того, мы улучшили компонент ИИ-рецензента, интегрировав цикл обратной связи на основе Vision-Language Model (VLM) для итеративного улучшения содержания и эстетики графических материалов. Мы оценили The AI Scientist-v2, отправив три полностью автономные статьи на рецензируемый семинар ICLR. Примечательно, что одна из работ получила достаточно высокие оценки, чтобы превысить средний порог принятия для работ, написанных людьми, что стало первым случаем успешного прохождения рецензирования полностью сгенерированной ИИ статьи. Это достижение подчеркивает растущие возможности ИИ в проведении всех аспектов научных исследований. Мы ожидаем, что дальнейшие разработки в области автономных технологий научных открытий окажут глубокое влияние на генерацию человеческих знаний, обеспечив беспрецедентную масштабируемость исследовательской продуктивности и значительно ускорив научные прорывы, что принесёт огромную пользу обществу. Мы открыли исходный код системы на https://github.com/SakanaAI/AI-Scientist-v2, чтобы способствовать дальнейшему развитию этой трансформационной технологии. Мы также обсуждаем роль ИИ в науке, включая вопросы безопасности ИИ.

English

AI is increasingly playing a pivotal role in transforming how scientific discoveries are made. We introduce The AI Scientist-v2, an end-to-end agentic system capable of producing the first entirely AI generated peer-review-accepted workshop paper. This system iteratively formulates scientific hypotheses, designs and executes experiments, analyzes and visualizes data, and autonomously authors scientific manuscripts. Compared to its predecessor (v1, Lu et al., 2024 arXiv:2408.06292), The AI Scientist-v2 eliminates the reliance on human-authored code templates, generalizes effectively across diverse machine learning domains, and leverages a novel progressive agentic tree-search methodology managed by a dedicated experiment manager agent. Additionally, we enhance the AI reviewer component by integrating a Vision-Language Model (VLM) feedback loop for iterative refinement of content and aesthetics of the figures. We evaluated The AI Scientist-v2 by submitting three fully autonomous manuscripts to a peer-reviewed ICLR workshop. Notably, one manuscript achieved high enough scores to exceed the average human acceptance threshold, marking the first instance of a fully AI-generated paper successfully navigating a peer review. This accomplishment highlights the growing capability of AI in conducting all aspects of scientific research. We anticipate that further advancements in autonomous scientific discovery technologies will profoundly impact human knowledge generation, enabling unprecedented scalability in research productivity and significantly accelerating scientific breakthroughs, greatly benefiting society at large. We have open-sourced the code at https://github.com/SakanaAI/AI-Scientist-v2 to foster the future development of this transformative technology. We also discuss the role of AI in science, including AI safety.