Magpie: 인터랙티브 게임을 위한 실시간 월드 렌더러

초록

현대 게임 개발은 기존의 그래픽 파이프라인에 크게 의존한다. 고품질의 시각적 콘텐츠를 제작하려면 모델링, 소재 저작, 애니메이션, 조명, 이펙트, 런타임 최적화가 필요하며, 이로 인해 에셋 제작 비용이 증가하고 게임 프로토타입의 개발 주기가 길어진다. 최근 비디오 파운데이션 모델이 영화 및 비디오 제작 방식을 변화시키기 시작했지만, 게임은 선형 미디어와 다르다. 게임은 연속적이고 사실적인 영상뿐만 아니라 안정적이고 재현 가능한 게임플레이 규칙, 객체 상태, 상호작용 결과를 요구한다. 본 논문에서는 인터랙티브 게임을 위한 실시간 생성형 월드 렌더링 시스템인 Magpie를 제안한다. Magpie는 게임플레이 실행과 시각적 생성을 분리한다. 디자이너는 게임 엔진에서 씬과 규칙을 정의한다. 런타임에서 게임 엔진은 플레이어의 행동을 해석하고 월드 상태를 유지하며, 독립적인 렌더 서버는 엔진이 생성한 화이트박스 프레임으로부터 시각적 출력을 생성한다. Magpie는 생성 모델을 실시간 게임 렌더링에 적용하기 위한 시스템 수준의 구현 경로를 제공한다. 이는 게임플레이의 설계 가능성과 재현성을 유지하면서 초기 게임 프로토타입이 완성된 시각적 에셋에 의존하는 정도를 줄인다.

English

Modern game development relies heavily on conventional graphics pipelines. High-quality visual content requires modeling, material authoring, animation, lighting, effects, and runtime optimization, making asset production expensive and extending the development cycle of game prototypes. Recently, video foundation models are beginning to change film and video production, but games differ from linear media, they require not only continuous and realistic imagery, but also stable and reproducible gameplay rules, object states, and interaction outcomes. We present Magpie, a real-time generative world-rendering system for interactive games. Magpie separates gameplay execution from visual generation. Designers define scenes and rules in a game engine. At runtime, the Game Engine resolves player actions and maintains world state, while an independent Render Server generates visual output from white-box frames produced by the engine. Magpie provides a system-level implementation path for applying generative models to real-time game rendering. It preserves gameplay designability and reproducibility, and reduces the dependence of early game prototypes on complete visual assets.