Decomposizione Rapida degli Sprite da Grafiche Animate
Fast Sprite Decomposition from Animated Graphics
August 7, 2024
Autori: Tomoyuki Suzuki, Kotaro Kikuchi, Kota Yamaguchi
cs.AI
Abstract
Questo articolo presenta un approccio per scomporre grafiche animate in sprite, un insieme di elementi o livelli di base. Il nostro approccio si basa sull'ottimizzazione dei parametri degli sprite per adattarli al video raster. Per migliorare l'efficienza, assumiamo texture statiche per gli sprite al fine di ridurre lo spazio di ricerca, prevenendo al contempo artefatti mediante un modello a priori delle texture. Per accelerare ulteriormente l'ottimizzazione, introduciamo l'inizializzazione dei parametri degli sprite utilizzando un modello pre-addestrato per la segmentazione di oggetti video e l'input dell'utente tramite annotazioni su singoli fotogrammi. Per il nostro studio, abbiamo costruito il dataset Crello Animation da un servizio di design online e definito metriche quantitative per misurare la qualità degli sprite estratti. Gli esperimenti dimostrano che il nostro metodo supera significativamente i baseline per compiti di scomposizione simili in termini di compromesso qualità/efficienza.
English
This paper presents an approach to decomposing animated graphics into
sprites, a set of basic elements or layers. Our approach builds on the
optimization of sprite parameters to fit the raster video. For efficiency, we
assume static textures for sprites to reduce the search space while preventing
artifacts using a texture prior model. To further speed up the optimization, we
introduce the initialization of the sprite parameters utilizing a pre-trained
video object segmentation model and user input of single frame annotations. For
our study, we construct the Crello Animation dataset from an online design
service and define quantitative metrics to measure the quality of the extracted
sprites. Experiments show that our method significantly outperforms baselines
for similar decomposition tasks in terms of the quality/efficiency tradeoff.