Schnelle Sprite-Zerlegung aus animierter Grafik

Fast Sprite Decomposition from Animated Graphics

August 7, 2024

Autoren: Tomoyuki Suzuki, Kotaro Kikuchi, Kota Yamaguchi

cs.AI

Zusammenfassung

Dieses Paper stellt einen Ansatz zur Zerlegung von animierten Grafiken in Sprites vor, eine Reihe von grundlegenden Elementen oder Ebenen. Unser Ansatz baut auf der Optimierung von Sprite-Parametern auf, um zum Raster-Video zu passen. Zur Effizienz nehmen wir an, dass Sprites statische Texturen haben, um den Suchraum zu reduzieren und Artefakte mithilfe eines Textur-Prior-Modells zu verhindern. Um die Optimierung weiter zu beschleunigen, führen wir die Initialisierung der Sprite-Parameter ein, indem wir ein vorab trainiertes Video-Objektsegmentierungsmodell und Benutzereingaben von Einzelbildannotationen nutzen. Für unsere Studie erstellen wir den Crello Animation Datensatz aus einem Online-Designservice und definieren quantitative Metriken zur Messung der Qualität der extrahierten Sprites. Experimente zeigen, dass unsere Methode im Hinblick auf das Verhältnis von Qualität zu Effizienz signifikant besser abschneidet als Baselines für ähnliche Zerlegungsaufgaben.

English

This paper presents an approach to decomposing animated graphics into sprites, a set of basic elements or layers. Our approach builds on the optimization of sprite parameters to fit the raster video. For efficiency, we assume static textures for sprites to reduce the search space while preventing artifacts using a texture prior model. To further speed up the optimization, we introduce the initialization of the sprite parameters utilizing a pre-trained video object segmentation model and user input of single frame annotations. For our study, we construct the Crello Animation dataset from an online design service and define quantitative metrics to measure the quality of the extracted sprites. Experiments show that our method significantly outperforms baselines for similar decomposition tasks in terms of the quality/efficiency tradeoff.