Tipografia Dinâmica: Dando Vida às Palavras

Dynamic Typography: Bringing Words to Life

April 17, 2024

Autores: Zichen Liu, Yihao Meng, Hao Ouyang, Yue Yu, Bolin Zhao, Daniel Cohen-Or, Huamin Qu

cs.AI

Resumo

A animação de texto serve como um meio expressivo, transformando a comunicação estática em experiências dinâmicas ao infundir palavras com movimento para evocar emoções, enfatizar significados e construir narrativas cativantes. Criar animações semanticamente conscientes apresenta desafios significativos, exigindo expertise em design gráfico e animação. Apresentamos um esquema automatizado de animação de texto, denominado "Tipografia Dinâmica", que combina duas tarefas desafiadoras. Ele deforma letras para transmitir significado semântico e as infunde com movimentos vibrantes com base em prompts do usuário. Nossa técnica utiliza representações de gráficos vetoriais e uma estrutura baseada em otimização de ponta a ponta. Essa estrutura emprega campos de deslocamento neural para converter letras em formas base e aplica movimento por quadro, incentivando a coerência com o conceito textual pretendido. Técnicas de preservação de forma e regularização de perda perceptual são empregadas para manter a legibilidade e a integridade estrutural durante o processo de animação. Demonstramos a generalizabilidade de nossa abordagem em vários modelos de texto para vídeo e destacamos a superioridade de nossa metodologia de ponta a ponta em relação a métodos de base, que podem compreender tarefas separadas. Por meio de avaliações quantitativas e qualitativas, demonstramos a eficácia de nossa estrutura na geração de animações de texto coerentes que interpretam fielmente os prompts do usuário, mantendo a legibilidade. Nosso código está disponível em: https://animate-your-word.github.io/demo/.

English

Text animation serves as an expressive medium, transforming static communication into dynamic experiences by infusing words with motion to evoke emotions, emphasize meanings, and construct compelling narratives. Crafting animations that are semantically aware poses significant challenges, demanding expertise in graphic design and animation. We present an automated text animation scheme, termed "Dynamic Typography", which combines two challenging tasks. It deforms letters to convey semantic meaning and infuses them with vibrant movements based on user prompts. Our technique harnesses vector graphics representations and an end-to-end optimization-based framework. This framework employs neural displacement fields to convert letters into base shapes and applies per-frame motion, encouraging coherence with the intended textual concept. Shape preservation techniques and perceptual loss regularization are employed to maintain legibility and structural integrity throughout the animation process. We demonstrate the generalizability of our approach across various text-to-video models and highlight the superiority of our end-to-end methodology over baseline methods, which might comprise separate tasks. Through quantitative and qualitative evaluations, we demonstrate the effectiveness of our framework in generating coherent text animations that faithfully interpret user prompts while maintaining readability. Our code is available at: https://animate-your-word.github.io/demo/.