Generazione di Personaggi Vivaci in Stile Cartoon 2D da Descrizioni Testuali

Textoon: Generating Vivid 2D Cartoon Characters from Text Descriptions

January 17, 2025

Autori: Chao He, Jianqiang Ren, Liefeng Bo

cs.AI

Abstract

Lo stile cartoon 2D è una forma d'arte prominente nella creazione digitale di personaggi, particolarmente popolare tra il pubblico più giovane. Mentre i progressi nella tecnologia digitale umana hanno stimolato una vasta ricerca sui personaggi digitali fotorealistici e in 3D, i personaggi interattivi in stile cartoon 2D hanno ricevuto relativamente meno attenzione. A differenza dei corrispettivi in 3D, che richiedono una costruzione sofisticata e un rendering intensivo delle risorse, Live2D, un formato ampiamente utilizzato per i personaggi in stile cartoon 2D, offre un'alternativa più efficiente, che consente di animare i personaggi 2D in modo che simulino il movimento in 3D senza la necessità di costruire un modello 3D completo. Inoltre, Live2D utilizza un rendering leggero in HTML5 (H5), migliorando sia l'accessibilità che l'efficienza. In questo rapporto tecnico, presentiamo Textoon, un metodo innovativo per generare diversi personaggi in stile cartoon 2D nel formato Live2D basato su descrizioni testuali. Il Textoon sfrutta modelli linguistici e visivi all'avanguardia per comprendere le intenzioni testuali e generare l'aspetto 2D, in grado di creare una vasta gamma di personaggi in stile cartoon 2D sorprendenti e interattivi in un minuto. La homepage del progetto è https://human3daigc.github.io/Textoon_webpage/.

English

The 2D cartoon style is a prominent art form in digital character creation, particularly popular among younger audiences. While advancements in digital human technology have spurred extensive research into photorealistic digital humans and 3D characters, interactive 2D cartoon characters have received comparatively less attention. Unlike 3D counterparts, which require sophisticated construction and resource-intensive rendering, Live2D, a widely-used format for 2D cartoon characters, offers a more efficient alternative, which allows to animate 2D characters in a manner that simulates 3D movement without the necessity of building a complete 3D model. Furthermore, Live2D employs lightweight HTML5 (H5) rendering, improving both accessibility and efficiency. In this technical report, we introduce Textoon, an innovative method for generating diverse 2D cartoon characters in the Live2D format based on text descriptions. The Textoon leverages cutting-edge language and vision models to comprehend textual intentions and generate 2D appearance, capable of creating a wide variety of stunning and interactive 2D characters within one minute. The project homepage is https://human3daigc.github.io/Textoon_webpage/.