애니메이션 그래픽으로부터 빠른 스프라이트 분해

Fast Sprite Decomposition from Animated Graphics

August 7, 2024

저자: Tomoyuki Suzuki, Kotaro Kikuchi, Kota Yamaguchi

cs.AI

초록

본 논문은 애니메이션 그래픽을 스프라이트로 분해하는 방법론을 제시합니다. 스프라이트는 기본 요소 또는 레이어의 집합입니다. 저희 방법론은 래스터 비디오에 맞게 스프라이트 매개변수를 최적화하는 데 기반을 두고 있습니다. 효율성을 위해, 스프라이트에 대해 정적 텍스처를 가정하여 검색 공간을 줄이고 텍스처 우선 모델을 사용하여 아티팩트를 방지합니다. 최적화 속도를 높이기 위해, 사전 훈련된 비디오 객체 분할 모델과 사용자의 단일 프레임 주석 입력을 활용하여 스프라이트 매개변수의 초기화를 소개합니다. 연구를 위해 온라인 디자인 서비스에서 Crello Animation 데이터셋을 구축하고 추출된 스프라이트의 품질을 측정하는 양적 측정 항목을 정의합니다. 실험 결과, 저희 방법은 품질/효율성 균형 측면에서 유사한 분해 작업에 대해 기존 방법을 현저히 능가함을 보여줍니다.

English

This paper presents an approach to decomposing animated graphics into sprites, a set of basic elements or layers. Our approach builds on the optimization of sprite parameters to fit the raster video. For efficiency, we assume static textures for sprites to reduce the search space while preventing artifacts using a texture prior model. To further speed up the optimization, we introduce the initialization of the sprite parameters utilizing a pre-trained video object segmentation model and user input of single frame annotations. For our study, we construct the Crello Animation dataset from an online design service and define quantitative metrics to measure the quality of the extracted sprites. Experiments show that our method significantly outperforms baselines for similar decomposition tasks in terms of the quality/efficiency tradeoff.