ChatPaper.aiChatPaper

Vidu S1: Um Modelo de Geração de Vídeo Interativa em Tempo Real

Vidu S1: A Real-Time Interactive Video Generation Model

July 3, 2026
Autores: Jintao Zhang, Kai Jiang, Jintao Chen, Xu Wang, Yang Luo, Yuji Wang, Dechuang Chen, Jungang Li, Chengyang Ye, Marco Chen, Hongzhou Zhu, Min Zhao, Yuxuan Jiang, Zhengkun Huang, Chendong Xiang, Kaiwen Zheng, Haoxu Wang, Xiaohang Wang, Qi Jia, Xin Chen, Yimin Chen, Youhe Jiang, Fangcheng Fu, Zhijie Deng, Fan Bao, Jianfei Chen, Jun Zhu
cs.AI

Resumo

Apresentamos o Vidu S1, um modelo de geração de vídeo interativo em tempo real que suporta controle por voz de personagens digitais. Os usuários podem controlar o conteúdo de geração de vídeo a qualquer momento por meio de instruções de voz. O Vidu S1 suporta geração de vídeo em tempo real de duração infinita, sem desfoque, desvio ou distorção visual. Construído com TurboDiffusion e TurboServe, o Vidu S1 produz vídeos em tempo real a 540p a até 42 FPS em GPUs comuns para consumidores. Os usuários podem fazer upload de imagens personalizadas de pessoas reais, animes e animais de estimação, e escolher diferentes tons de voz para experiências personalizadas. Experimentos mostram que o Vidu S1 atinge o melhor desempenho em todas as métricas de teste, enquanto atende plenamente aos requisitos de inferência em tempo real. Uma demonstração online interativa está disponível em https://vidu.com/vidu-stream.
English
We introduce Vidu S1, a real-time interactive video generation model supporting voice control of digital characters. Users can control video generation content at any moment through voice instructions. Vidu S1 supports infinite-length real-time video generation without blurring, drift, or visual distortion. Built with TurboDiffusion and TurboServe, Vidu S1 outputs 540p real-time videos at up to 42 FPS on regular consumer GPUs. Users can upload custom images of real people, anime, and pets, and choose different voice tones for personalized experiences. Experiments show that Vidu S1 achieves the best performance across all test metrics while fully meeting real-time inference requirements. A playable online demo is available at https://vidu.com/vidu-stream.