SketchDynamics: 애니메이션 생성에서 동적 의도 표현을 위한 자유형 스케치 탐구

SketchDynamics: Exploring Free-Form Sketches for Dynamic Intent Expression in Animation Generation

January 28, 2026

저자: Boyu Li, Lin-Ping Yuan, Zeyu Wang, Hongbo Fu

cs.AI

초록

스케치는 애니메이션 제작에서 동적 의도(즉, 요소가 시간과 공간에 따라 어떻게 변화하는지)를 직관적으로 전달하는 방법을 제공하여 자동 콘텐츠 생성에 자연스러운 매체 역할을 합니다. 그러나 기존 접근법들은 스케치를 고정된 명령 토큰이나 미리 정의된 시각적 형태로 제한하는 경우가 많아, 스케치의 자유로운 특성과 의도를 형성하는 데 있어 인간의 중심적인 역할을 간과합니다. 이를 해결하기 위해 우리는 사용자가 자유형 스케치를 통해 시각-언어 모델에 동적 의도를 전달하는 상호작용 패러다임을 소개하며, 이를 스케치 스토리보드에서 모션 그래픽으로의 워크플로우로 구체화합니다. 우리는 인터페이스를 구현하고 24명의 참가자를 대상으로 3단계 연구를 통해 개선했습니다. 연구 결과는 스케치가 최소한의 입력으로 동작을 어떻게 전달하는지, 그 고유의 모호함이 명확화를 위해 사용자의 참여를 어떻게 요구하는지, 그리고 스케치가 비디오 정제를 시각적으로 어떻게 안내할 수 있는지를 보여줍니다. 우리의 연구 결과는 스케치와 AI의 상호작용이 의도와 결과 사이의 간극을 메우는 잠재력을 보여주며, 3D 애니메이션 및 비디오 생성에 대한 적용 가능성을 입증합니다.

English

Sketching provides an intuitive way to convey dynamic intent in animation authoring (i.e., how elements change over time and space), making it a natural medium for automatic content creation. Yet existing approaches often constrain sketches to fixed command tokens or predefined visual forms, overlooking their freeform nature and the central role of humans in shaping intention. To address this, we introduce an interaction paradigm where users convey dynamic intent to a vision-language model via free-form sketching, instantiated here in a sketch storyboard to motion graphics workflow. We implement an interface and improve it through a three-stage study with 24 participants. The study shows how sketches convey motion with minimal input, how their inherent ambiguity requires users to be involved for clarification, and how sketches can visually guide video refinement. Our findings reveal the potential of sketch and AI interaction to bridge the gap between intention and outcome, and demonstrate its applicability to 3D animation and video generation.