Vidu S2: 실시간 인터랙티브, 편집 가능, 공간 비디오 생성
Vidu S2: Real-Time Interactive, Editable, and Spatial Video Generation
September 10, 2026
저자: Jintao Zhang, Kai Jiang, Jintao Chen, Xu Wang, Deyuan Liu, Jungang Li, Dechuang Chen, Ming Lin, Jingjiang Zhou, Haopeng Jin, Qi Jia, Xiaohang Wang, Yaole Wang, Zhanqiang Zhang, Ran Li, Zhengkun Huang, Shuyue Xiong, Yuji Wang, Zikun Dai, Hui He, Yang Luo, Mang Ning, Weiqi Feng, Chengyang Ye, Xinyue Lin, Min Zhao, Hongzhou Zhu, Hengkai Tan, Zeyuan Wang, Chendong Xiang, Kaiwen Zheng, Zhijie Deng, Fan Bao, Jianfei Chen, Jun Zhu
cs.AI
초록
우리는 실시간 인터랙티브 디지털 캐릭터 모델인 Vidu S2-Avatar와 실시간 비디오 편집 모델인 Vidu S2-Editing으로 구성된 Vidu S2를 제시한다. 또한, Vidu S2-Avatar와 Vidu S2-Editing 모두에 대해 실시간 공간 비디오 생성의 가능성을 탐구한다. Vidu S1과 비교하여 Vidu S2-Avatar는 실시간 720p 비디오 생성, 언제든 업데이트할 수 있는 동적 참조를 활용한 생성, 그리고 춤추기와 같은 더 강력한 지시 수행을 지원한다. Vidu S2-Editing은 스타일 렌더링, 의상 교체, 캐릭터 교체, 배경 교체를 포함하여 비디오 스트림을 실시간으로 편집할 수 있도록 지원한다. 실험 결과 Vidu S2는 모든 베이스라인을 능가하는 성능을 보인다. 체험 가능한 온라인 데모는 https://vidu.com/vidu-stream에서 이용할 수 있다.
English
We present Vidu S2, which comprises Vidu S2-Avatar, a real-time interactive digital-character model, and Vidu S2-Editing, a real-time video editing model. Moreover, we explore the feasibility of real-time spatial video generation for both Vidu S2-Avatar and Vidu S2-Editing. Compared with Vidu S1, Vidu S2-Avatar supports real-time 720p video generation, generation with dynamic references that can be updated at any moment, and stronger instruction following, such as dancing. Vidu S2-Editing supports editing a video stream in real time, including style rendering, clothing replacement, character replacement, and background replacement. Experiments show that Vidu S2 outperforms all baselines. A playable online demo is available at https://vidu.com/vidu-stream.