Generación de Personajes de Dibujos Animados Vívidos en 2D a partir de Descripciones de Texto

Textoon: Generating Vivid 2D Cartoon Characters from Text Descriptions

January 17, 2025

Autores: Chao He, Jianqiang Ren, Liefeng Bo

cs.AI

Resumen

El estilo de dibujo animado en 2D es una forma de arte prominente en la creación de personajes digitales, especialmente popular entre audiencias más jóvenes. Si bien los avances en tecnología digital humana han impulsado una extensa investigación en humanos digitales fotorrealistas y personajes en 3D, los personajes interactivos de dibujos animados en 2D han recibido considerablemente menos atención. A diferencia de sus contrapartes en 3D, que requieren una construcción sofisticada y un renderizado intensivo en recursos, Live2D, un formato ampliamente utilizado para personajes de dibujos animados en 2D, ofrece una alternativa más eficiente, que permite animar personajes en 2D de una manera que simula movimientos en 3D sin la necesidad de construir un modelo completo en 3D. Además, Live2D emplea un renderizado ligero en HTML5 (H5), mejorando tanto la accesibilidad como la eficiencia. En este informe técnico, presentamos Textoon, un método innovador para generar diversos personajes de dibujos animados en 2D en el formato Live2D basado en descripciones de texto. Textoon aprovecha modelos de lenguaje y visión de vanguardia para comprender las intenciones textuales y generar apariencias en 2D, capaz de crear una amplia variedad de personajes en 2D sorprendentes e interactivos en un minuto. La página principal del proyecto es https://human3daigc.github.io/Textoon_webpage/.

English

The 2D cartoon style is a prominent art form in digital character creation, particularly popular among younger audiences. While advancements in digital human technology have spurred extensive research into photorealistic digital humans and 3D characters, interactive 2D cartoon characters have received comparatively less attention. Unlike 3D counterparts, which require sophisticated construction and resource-intensive rendering, Live2D, a widely-used format for 2D cartoon characters, offers a more efficient alternative, which allows to animate 2D characters in a manner that simulates 3D movement without the necessity of building a complete 3D model. Furthermore, Live2D employs lightweight HTML5 (H5) rendering, improving both accessibility and efficiency. In this technical report, we introduce Textoon, an innovative method for generating diverse 2D cartoon characters in the Live2D format based on text descriptions. The Textoon leverages cutting-edge language and vision models to comprehend textual intentions and generate 2D appearance, capable of creating a wide variety of stunning and interactive 2D characters within one minute. The project homepage is https://human3daigc.github.io/Textoon_webpage/.