Generatieve AI voor Cel-Animatie: Een Overzicht

Generative AI for Cel-Animation: A Survey

January 8, 2025

Auteurs: Yunlong Tang, Junjia Guo, Pinxin Liu, Zhiyuan Wang, Hang Hua, Jia-Xing Zhong, Yunzhong Xiao, Chao Huang, Luchuan Song, Susan Liang, Yizhi Song, Liu He, Jing Bi, Mingqian Feng, Xinyang Li, Zeliang Zhang, Chenliang Xu

cs.AI

Samenvatting

De traditionele Celluloid (Cel) Animatieproductiepijplijn omvat meerdere essentiële stappen, waaronder storyboarding, lay-outontwerp, keyframe-animatie, inbetweening en kleuring, die aanzienlijke handmatige inspanning, technische expertise en aanzienlijke tijdsinvestering vereisen. Deze uitdagingen hebben historisch gezien de efficiëntie en schaalbaarheid van Cel-Animatieproductie belemmerd. De opkomst van generatieve kunstmatige intelligentie (GenAI), met grote taalmodellen, multimodale modellen en diffusiemodellen, biedt innovatieve oplossingen door taken zoals het genereren van inbetween frames, kleuring en storyboardcreatie te automatiseren. Deze verkenning onderzoekt hoe de integratie van GenAI de traditionele animatieworkflows revolutioneert door technische barrières te verlagen, de toegankelijkheid voor een breder scala aan makers te vergroten via tools zoals AniDoc, ToonCrafter en AniSora, en kunstenaars in staat te stellen zich meer te richten op creatieve expressie en artistieke innovatie. Ondanks het potentieel blijven kwesties zoals het handhaven van visuele consistentie, het waarborgen van stilistische coherentie en het aanpakken van ethische overwegingen uitdagingen vormen. Bovendien bespreekt dit artikel toekomstige richtingen en verkent potentiële vooruitgang in door AI ondersteunde animatie. Voor verdere verkenning en bronnen, bezoek alstublieft ons GitHub-repository: https://github.com/yunlong10/Awesome-AI4Animation

English

Traditional Celluloid (Cel) Animation production pipeline encompasses multiple essential steps, including storyboarding, layout design, keyframe animation, inbetweening, and colorization, which demand substantial manual effort, technical expertise, and significant time investment. These challenges have historically impeded the efficiency and scalability of Cel-Animation production. The rise of generative artificial intelligence (GenAI), encompassing large language models, multimodal models, and diffusion models, offers innovative solutions by automating tasks such as inbetween frame generation, colorization, and storyboard creation. This survey explores how GenAI integration is revolutionizing traditional animation workflows by lowering technical barriers, broadening accessibility for a wider range of creators through tools like AniDoc, ToonCrafter, and AniSora, and enabling artists to focus more on creative expression and artistic innovation. Despite its potential, issues such as maintaining visual consistency, ensuring stylistic coherence, and addressing ethical considerations continue to pose challenges. Furthermore, this paper discusses future directions and explores potential advancements in AI-assisted animation. For further exploration and resources, please visit our GitHub repository: https://github.com/yunlong10/Awesome-AI4Animation