テキストから鮮やかな2Dアニメキャラクターを生成する

Textoon: Generating Vivid 2D Cartoon Characters from Text Descriptions

January 17, 2025

著者: Chao He, Jianqiang Ren, Liefeng Bo

cs.AI

要旨

2Dのアニメ風スタイルは、デジタルキャラクター作成における顕著な芸術形態であり、特に若い観客に人気があります。デジタルヒューマンテクノロジーの進歩により、フォトリアルなデジタルヒューマンや3Dキャラクターへの研究が盛んに行われていますが、インタラクティブな2Dアニメキャラクターは比較的注目されていませんでした。3Dキャラクターとは異なり、高度な構築とリソース集約型のレンダリングが必要な3Dモデルの構築を必要とせず、2Dアニメキャラクターを3Dの動きをシミュレートする方法でアニメーションすることができる、広く使用されているLive2Dフォーマットがより効率的な代替手段を提供しています。さらに、Live2Dは軽量なHTML5（H5）レンダリングを採用しており、アクセシビリティと効率の両方を向上させています。本技術レポートでは、テキスト記述に基づいてLive2D形式で多様な2Dアニメキャラクターを生成する革新的な手法であるTextoonを紹介します。Textoonは、最新の言語モデルとビジョンモデルを活用してテキストの意図を理解し、2Dの外観を生成し、1分以内に驚くほど多様でインタラクティブな2Dキャラクターを作成する能力を持っています。プロジェクトのホームページはhttps://human3daigc.github.io/Textoon_webpage/です。

English

The 2D cartoon style is a prominent art form in digital character creation, particularly popular among younger audiences. While advancements in digital human technology have spurred extensive research into photorealistic digital humans and 3D characters, interactive 2D cartoon characters have received comparatively less attention. Unlike 3D counterparts, which require sophisticated construction and resource-intensive rendering, Live2D, a widely-used format for 2D cartoon characters, offers a more efficient alternative, which allows to animate 2D characters in a manner that simulates 3D movement without the necessity of building a complete 3D model. Furthermore, Live2D employs lightweight HTML5 (H5) rendering, improving both accessibility and efficiency. In this technical report, we introduce Textoon, an innovative method for generating diverse 2D cartoon characters in the Live2D format based on text descriptions. The Textoon leverages cutting-edge language and vision models to comprehend textual intentions and generate 2D appearance, capable of creating a wide variety of stunning and interactive 2D characters within one minute. The project homepage is https://human3daigc.github.io/Textoon_webpage/.