Make-A-Character: 고품질 텍스트-3D 캐릭터 생성, 단 몇 분 만에

초록

AI 에이전트와 메타버스의 등장으로 맞춤형이고 표현력이 풍부한 3D 캐릭터에 대한 수요가 증가하고 있지만, 기존 컴퓨터 그래픽 도구를 사용하여 3D 캐릭터를 만드는 것은 복잡하고 시간이 많이 소요되는 작업입니다. 이러한 문제를 해결하기 위해, 우리는 텍스트 설명으로부터 생생한 3D 아바타를 생성하는 사용자 친화적인 프레임워크인 Make-A-Character(Mach)를 제안합니다. 이 프레임워크는 대규모 언어 및 비전 모델의 힘을 활용하여 텍스트 의도 이해와 중간 이미지 생성을 수행한 후, 인간 중심의 시각적 인지 및 3D 생성 모듈을 거칩니다. 우리의 시스템은 사용자가 기대에 부합하는 제어 가능하고 현실적이며 완전히 구현된 3D 캐릭터를 2분 이내에 손쉽게 제작할 수 있도록 직관적인 접근 방식을 제공하며, 동적 표현력을 위해 기존 CG 파이프라인과의 쉬운 통합도 가능하게 합니다. 더 자세한 정보는 프로젝트 페이지(https://human3daigc.github.io/MACH/)를 방문해 주세요.

English

There is a growing demand for customized and expressive 3D characters with the emergence of AI agents and Metaverse, but creating 3D characters using traditional computer graphics tools is a complex and time-consuming task. To address these challenges, we propose a user-friendly framework named Make-A-Character (Mach) to create lifelike 3D avatars from text descriptions. The framework leverages the power of large language and vision models for textual intention understanding and intermediate image generation, followed by a series of human-oriented visual perception and 3D generation modules. Our system offers an intuitive approach for users to craft controllable, realistic, fully-realized 3D characters that meet their expectations within 2 minutes, while also enabling easy integration with existing CG pipeline for dynamic expressiveness. For more information, please visit the project page at https://human3daigc.github.io/MACH/.

Make-A-Character: 고품질 텍스트-3D 캐릭터 생성, 단 몇 분 만에

Make-A-Character: High Quality Text-to-3D Character Generation within Minutes

초록

Support