Динамическая типографика: оживление слов

Dynamic Typography: Bringing Words to Life

April 17, 2024

Авторы: Zichen Liu, Yihao Meng, Hao Ouyang, Yue Yu, Bolin Zhao, Daniel Cohen-Or, Huamin Qu

cs.AI

Аннотация

Анимация текста служит выразительным средством, преобразуя статическую коммуникацию в динамичные впечатления, вдыхая словам движение для вызова эмоций, подчеркивания значений и создания убедительных повествований. Создание анимаций, осознающих семантику, представляет существенные вызовы, требуя опыта в графическом дизайне и анимации. Мы представляем автоматизированную схему анимации текста, названную "Динамическая Типографика", которая объединяет две сложные задачи. Она деформирует буквы для передачи семантического значения и наполняет их живыми движениями на основе запросов пользователя. Наш метод использует векторные графические представления и оптимизационную структуру на основе конечных результатов. Эта структура использует нейронные поля смещения для преобразования букв в базовые формы и применяет движение кадра к кадру, поощряя согласованность с задуманной текстовой концепцией. Техники сохранения формы и регуляризация потерь восприятия используются для поддержания читаемости и структурной целостности на протяжении процесса анимации. Мы демонстрируем обобщаемость нашего подхода на различных моделях текста-видео и выделяем превосходство нашей методологии конечных результатов над базовыми методами, которые могут включать в себя отдельные задачи. Через количественные и качественные оценки мы демонстрируем эффективность нашей структуры в создании согласованных анимаций текста, верно интерпретирующих запросы пользователя, сохраняя читаемость. Наш код доступен по ссылке: https://animate-your-word.github.io/demo/.

English

Text animation serves as an expressive medium, transforming static communication into dynamic experiences by infusing words with motion to evoke emotions, emphasize meanings, and construct compelling narratives. Crafting animations that are semantically aware poses significant challenges, demanding expertise in graphic design and animation. We present an automated text animation scheme, termed "Dynamic Typography", which combines two challenging tasks. It deforms letters to convey semantic meaning and infuses them with vibrant movements based on user prompts. Our technique harnesses vector graphics representations and an end-to-end optimization-based framework. This framework employs neural displacement fields to convert letters into base shapes and applies per-frame motion, encouraging coherence with the intended textual concept. Shape preservation techniques and perceptual loss regularization are employed to maintain legibility and structural integrity throughout the animation process. We demonstrate the generalizability of our approach across various text-to-video models and highlight the superiority of our end-to-end methodology over baseline methods, which might comprise separate tasks. Through quantitative and qualitative evaluations, we demonstrate the effectiveness of our framework in generating coherent text animations that faithfully interpret user prompts while maintaining readability. Our code is available at: https://animate-your-word.github.io/demo/.