Генеративное искусственное интеллект для целевой анимации: обзор

Generative AI for Cel-Animation: A Survey

January 8, 2025

Авторы: Yunlong Tang, Junjia Guo, Pinxin Liu, Zhiyuan Wang, Hang Hua, Jia-Xing Zhong, Yunzhong Xiao, Chao Huang, Luchuan Song, Susan Liang, Yizhi Song, Liu He, Jing Bi, Mingqian Feng, Xinyang Li, Zeliang Zhang, Chenliang Xu

cs.AI

Аннотация

Традиционный процесс производства анимации на целлюлоиде (Cel) включает в себя несколько важных этапов, включая создание сценария, разработку макета, создание ключевых кадров, создание промежуточных кадров и раскрашивание, что требует значительных ручных усилий, технической экспертизы и значительных временных затрат. Эти вызовы исторически затрудняли эффективность и масштабируемость производства анимации на целлюлоиде. Возникновение генеративного искусственного интеллекта (GenAI), включающего в себя большие языковые модели, мультимодальные модели и модели диффузии, предлагает инновационные решения путем автоматизации задач, таких как создание промежуточных кадров, раскрашивание и создание сценариев. В данном обзоре исследуется, как интеграция GenAI революционизирует традиционные рабочие процессы анимации, снижая технические барьеры, расширяя доступность для более широкого круга создателей с помощью инструментов, таких как AniDoc, ToonCrafter и AniSora, и позволяя художникам сосредотачиваться на творческом выражении и художественных инновациях. Несмотря на его потенциал, проблемы, такие как поддержание визуальной согласованности, обеспечение стилистической целостности и учет этических соображений, продолжают представлять вызовы. Кроме того, в данной статье обсуждаются перспективы развития и исследуются потенциальные достижения в области анимации с помощью искусственного интеллекта. Для дальнейшего изучения и ресурсов посетите наш репозиторий на GitHub: https://github.com/yunlong10/Awesome-AI4Animation

English

Traditional Celluloid (Cel) Animation production pipeline encompasses multiple essential steps, including storyboarding, layout design, keyframe animation, inbetweening, and colorization, which demand substantial manual effort, technical expertise, and significant time investment. These challenges have historically impeded the efficiency and scalability of Cel-Animation production. The rise of generative artificial intelligence (GenAI), encompassing large language models, multimodal models, and diffusion models, offers innovative solutions by automating tasks such as inbetween frame generation, colorization, and storyboard creation. This survey explores how GenAI integration is revolutionizing traditional animation workflows by lowering technical barriers, broadening accessibility for a wider range of creators through tools like AniDoc, ToonCrafter, and AniSora, and enabling artists to focus more on creative expression and artistic innovation. Despite its potential, issues such as maintaining visual consistency, ensuring stylistic coherence, and addressing ethical considerations continue to pose challenges. Furthermore, this paper discusses future directions and explores potential advancements in AI-assisted animation. For further exploration and resources, please visit our GitHub repository: https://github.com/yunlong10/Awesome-AI4Animation