ReDirector: Het Maken van Videoretakes in Willekeurige Lengte met Roterende Camera-codering
ReDirector: Creating Any-Length Video Retakes with Rotary Camera Encoding
November 25, 2025
Auteurs: Byeongjun Park, Byung-Hoon Kim, Hyungjin Chung, Jong Chul Ye
cs.AI
Samenvatting
Wij presenteren ReDirector, een nieuwe camera-gestuurde methode voor het genereren van video-retakes voor dynamisch vastgelegde video's met variabele lengte. Specifiek herstellen wij een veelvoorkomend misbruik van RoPE in eerdere werken door de ruimtelijk-temporele posities van de invoervideo en de doel-retake op elkaar af te stemmen. Bovendien introduceren wij Rotary Camera Encoding (RoCE), een camera-gestuurde RoPE-faseverschuiving die multi-view-relaties binnen en tussen de invoer- en doelvideo's vastlegt en integreert. Door cameracondities in RoPE te integreren, generaliseert onze methode naar out-of-distribution cameratrajecten en videolengtes, wat resulteert in verbeterde lokalisatie van dynamische objecten en behoud van de statische achtergrond. Uitgebreide experimenten tonen verder significante verbeteringen aan in camerabestuurbaarheid, geometrische consistentie en videokwaliteit bij diverse trajecten en lengtes.
English
We present ReDirector, a novel camera-controlled video retake generation method for dynamically captured variable-length videos. In particular, we rectify a common misuse of RoPE in previous works by aligning the spatiotemporal positions of the input video and the target retake. Moreover, we introduce Rotary Camera Encoding (RoCE), a camera-conditioned RoPE phase shift that captures and integrates multi-view relationships within and across the input and target videos. By integrating camera conditions into RoPE, our method generalizes to out-of-distribution camera trajectories and video lengths, yielding improved dynamic object localization and static background preservation. Extensive experiments further demonstrate significant improvements in camera controllability, geometric consistency, and video quality across various trajectories and lengths.