ChatPaper.aiChatPaper

Vidu S1: Ein Echtzeit-Interaktives Videogenerierungsmodell

Vidu S1: A Real-Time Interactive Video Generation Model

July 3, 2026
Autoren: Jintao Zhang, Kai Jiang, Jintao Chen, Xu Wang, Yang Luo, Yuji Wang, Dechuang Chen, Jungang Li, Chengyang Ye, Marco Chen, Hongzhou Zhu, Min Zhao, Yuxuan Jiang, Zhengkun Huang, Chendong Xiang, Kaiwen Zheng, Haoxu Wang, Xiaohang Wang, Qi Jia, Xin Chen, Yimin Chen, Youhe Jiang, Fangcheng Fu, Zhijie Deng, Fan Bao, Jianfei Chen, Jun Zhu
cs.AI

Zusammenfassung

Wir stellen Vidu S1 vor, ein Echtzeit-interaktives Videogenerierungsmodell, das die Sprachsteuerung digitaler Charaktere unterstützt. Nutzer können jederzeit per Sprachbefehle den Inhalt der Videogenerierung steuern. Vidu S1 ermöglicht die Echtzeit-Videogenerierung unbegrenzter Länge ohne Unschärfe, Drift oder visuelle Verzerrungen. Entwickelt mit TurboDiffusion und TurboServe, gibt Vidu S1 540p-Echtzeitvideos mit bis zu 42 FPS auf handelsüblichen Consumer-GPUs aus. Nutzer können benutzerdefinierte Bilder von echten Personen, Anime und Haustieren hochladen und verschiedene Sprachstimmungen für personalisierte Erlebnisse wählen. Experimente zeigen, dass Vidu S1 die beste Leistung über alle Testmetriken hinweg erzielt und gleichzeitig die Echtzeit-Inferenzanforderungen vollständig erfüllt. Eine spielbare Online-Demo ist verfügbar unter https://vidu.com/vidu-stream.
English
We introduce Vidu S1, a real-time interactive video generation model supporting voice control of digital characters. Users can control video generation content at any moment through voice instructions. Vidu S1 supports infinite-length real-time video generation without blurring, drift, or visual distortion. Built with TurboDiffusion and TurboServe, Vidu S1 outputs 540p real-time videos at up to 42 FPS on regular consumer GPUs. Users can upload custom images of real people, anime, and pets, and choose different voice tones for personalized experiences. Experiments show that Vidu S1 achieves the best performance across all test metrics while fully meeting real-time inference requirements. A playable online demo is available at https://vidu.com/vidu-stream.