WorldGen : Du texte à des mondes 3D traversables et interactifs
WorldGen: From Text to Traversable and Interactive 3D Worlds
November 20, 2025
papers.authors: Dilin Wang, Hyunyoung Jung, Tom Monnier, Kihyuk Sohn, Chuhang Zou, Xiaoyu Xiang, Yu-Ying Yeh, Di Liu, Zixuan Huang, Thu Nguyen-Phuoc, Yuchen Fan, Sergiu Oprea, Ziyan Wang, Roman Shapovalov, Nikolaos Sarafianos, Thibault Groueix, Antoine Toisoul, Prithviraj Dhar, Xiao Chu, Minghao Chen, Geon Yeong Park, Mahima Gupta, Yassir Azziz, Rakesh Ranjan, Andrea Vedaldi
cs.AI
papers.abstract
Nous présentons WorldGen, un système permettant la création automatique de mondes 3D interactifs à grande échelle directement à partir d'invites textuelles. Notre approche transforme des descriptions en langage naturel en environnements traversables et entièrement texturés qui peuvent être immédiatement explorés ou modifiés dans des moteurs de jeu standard. En combinant un raisonnement sur la disposition des scènes piloté par LLM, la génération procédurale, la génération 3D basée sur des modèles de diffusion et une décomposition de scène prenant en compte les objets, WorldGen comble le fossé entre l'intention créative et les espaces virtuels fonctionnels, permettant aux créateurs de concevoir des mondes cohérents et navigables sans modélisation manuelle ni expertise 3D spécialisée. Le système est entièrement modulaire et permet un contrôle granulaire sur la disposition, l'échelle et le style, produisant des mondes géométriquement cohérents, visuellement riches et efficaces pour le rendu en temps réel. Ce travail représente une avancée vers une création générative de mondes accessible à grande échelle, repoussant les frontières de l'IA générative 3D pour des applications dans le jeu vidéo, la simulation et les environnements sociaux immersifs.
English
We introduce WorldGen, a system that enables the automatic creation of large-scale, interactive 3D worlds directly from text prompts. Our approach transforms natural language descriptions into traversable, fully textured environments that can be immediately explored or edited within standard game engines. By combining LLM-driven scene layout reasoning, procedural generation, diffusion-based 3D generation, and object-aware scene decomposition, WorldGen bridges the gap between creative intent and functional virtual spaces, allowing creators to design coherent, navigable worlds without manual modeling or specialized 3D expertise. The system is fully modular and supports fine-grained control over layout, scale, and style, producing worlds that are geometrically consistent, visually rich, and efficient to render in real time. This work represents a step towards accessible, generative world-building at scale, advancing the frontier of 3D generative AI for applications in gaming, simulation, and immersive social environments.