Tipografia Dinamica: Dare Vita alle Parole

Dynamic Typography: Bringing Words to Life

April 17, 2024

Autori: Zichen Liu, Yihao Meng, Hao Ouyang, Yue Yu, Bolin Zhao, Daniel Cohen-Or, Huamin Qu

cs.AI

Abstract

L'animazione testuale funge da mezzo espressivo, trasformando la comunicazione statica in esperienze dinamiche infondendo movimento alle parole per evocare emozioni, enfatizzare significati e costruire narrazioni coinvolgenti. Creare animazioni semanticamente consapevoli presenta sfide significative, richiedendo competenze nel design grafico e nell'animazione. Presentiamo uno schema automatizzato di animazione testuale, denominato "Tipografia Dinamica", che combina due compiti impegnativi. Deforma le lettere per trasmettere significato semantico e le arricchisce con movimenti vivaci basati sugli input dell'utente. La nostra tecnica sfrutta rappresentazioni di grafica vettoriale e un framework di ottimizzazione end-to-end. Questo framework utilizza campi di spostamento neurali per convertire le lettere in forme di base e applica movimenti per fotogramma, promuovendo la coerenza con il concetto testuale inteso. Tecniche di preservazione della forma e regolarizzazione della perdita percettiva vengono impiegate per mantenere la leggibilità e l'integrità strutturale durante il processo di animazione. Dimostriamo la generalizzabilità del nostro approccio attraverso vari modelli text-to-video e evidenziamo la superiorità della nostra metodologia end-to-end rispetto ai metodi di base, che potrebbero comprendere compiti separati. Attraverso valutazioni quantitative e qualitative, dimostriamo l'efficacia del nostro framework nel generare animazioni testuali coerenti che interpretano fedelmente gli input dell'utente mantenendo la leggibilità. Il nostro codice è disponibile all'indirizzo: https://animate-your-word.github.io/demo/.

English

Text animation serves as an expressive medium, transforming static communication into dynamic experiences by infusing words with motion to evoke emotions, emphasize meanings, and construct compelling narratives. Crafting animations that are semantically aware poses significant challenges, demanding expertise in graphic design and animation. We present an automated text animation scheme, termed "Dynamic Typography", which combines two challenging tasks. It deforms letters to convey semantic meaning and infuses them with vibrant movements based on user prompts. Our technique harnesses vector graphics representations and an end-to-end optimization-based framework. This framework employs neural displacement fields to convert letters into base shapes and applies per-frame motion, encouraging coherence with the intended textual concept. Shape preservation techniques and perceptual loss regularization are employed to maintain legibility and structural integrity throughout the animation process. We demonstrate the generalizability of our approach across various text-to-video models and highlight the superiority of our end-to-end methodology over baseline methods, which might comprise separate tasks. Through quantitative and qualitative evaluations, we demonstrate the effectiveness of our framework in generating coherent text animations that faithfully interpret user prompts while maintaining readability. Our code is available at: https://animate-your-word.github.io/demo/.