Gerando Personagens de Desenhos Animados Vívidos em 2D a partir de Descrições de Texto

Textoon: Generating Vivid 2D Cartoon Characters from Text Descriptions

January 17, 2025

Autores: Chao He, Jianqiang Ren, Liefeng Bo

cs.AI

Resumo

O estilo de desenho animado 2D é uma forma de arte proeminente na criação de personagens digitais, especialmente popular entre audiências mais jovens. Enquanto os avanços na tecnologia digital humana têm impulsionado extensas pesquisas em humanos digitais fotorrealistas e personagens 3D, os personagens de desenho animado interativos em 2D têm recebido relativamente menos atenção. Ao contrário de seus equivalentes em 3D, que exigem uma construção sofisticada e renderização intensiva de recursos, o Live2D, um formato amplamente utilizado para personagens de desenho animado em 2D, oferece uma alternativa mais eficiente, permitindo animar personagens 2D de uma maneira que simula movimentos 3D sem a necessidade de construir um modelo 3D completo. Além disso, o Live2D utiliza uma renderização leve em HTML5 (H5), melhorando tanto a acessibilidade quanto a eficiência. Neste relatório técnico, apresentamos o Textoon, um método inovador para gerar diversos personagens de desenho animado em 2D no formato Live2D com base em descrições de texto. O Textoon aproveita modelos de linguagem e visão de ponta para compreender as intenções textuais e gerar a aparência 2D, capaz de criar uma ampla variedade de personagens 2D impressionantes e interativos em um minuto. A página inicial do projeto é https://human3daigc.github.io/Textoon_webpage/.

English

The 2D cartoon style is a prominent art form in digital character creation, particularly popular among younger audiences. While advancements in digital human technology have spurred extensive research into photorealistic digital humans and 3D characters, interactive 2D cartoon characters have received comparatively less attention. Unlike 3D counterparts, which require sophisticated construction and resource-intensive rendering, Live2D, a widely-used format for 2D cartoon characters, offers a more efficient alternative, which allows to animate 2D characters in a manner that simulates 3D movement without the necessity of building a complete 3D model. Furthermore, Live2D employs lightweight HTML5 (H5) rendering, improving both accessibility and efficiency. In this technical report, we introduce Textoon, an innovative method for generating diverse 2D cartoon characters in the Live2D format based on text descriptions. The Textoon leverages cutting-edge language and vision models to comprehend textual intentions and generate 2D appearance, capable of creating a wide variety of stunning and interactive 2D characters within one minute. The project homepage is https://human3daigc.github.io/Textoon_webpage/.