Dynamische Typografie: Woorden tot leven brengen

Dynamic Typography: Bringing Words to Life

April 17, 2024

Auteurs: Zichen Liu, Yihao Meng, Hao Ouyang, Yue Yu, Bolin Zhao, Daniel Cohen-Or, Huamin Qu

cs.AI

Samenvatting

Tekstanimatie fungeert als een expressief medium dat statische communicatie omvormt tot dynamische ervaringen door woorden te voorzien van beweging om emoties op te roepen, betekenissen te benadrukken en boeiende verhalen te construeren. Het maken van semantisch bewuste animaties brengt aanzienlijke uitdagingen met zich mee en vereist expertise in grafisch ontwerp en animatie. Wij presenteren een geautomatiseerd tekstanimatieschema, genaamd "Dynamic Typography", dat twee uitdagende taken combineert. Het vervormt letters om semantische betekenis over te brengen en voorziet ze van levendige bewegingen op basis van gebruikersinstructies. Onze techniek maakt gebruik van vectorafbeeldingen en een end-to-end optimalisatiegebaseerd raamwerk. Dit raamwerk gebruikt neurale verplaatsingsvelden om letters om te zetten in basisvormen en past per-frame beweging toe, waardoor samenhang met het beoogde tekstuele concept wordt bevorderd. Vormbehoudtechnieken en perceptueel verliesregularisatie worden ingezet om de leesbaarheid en structurele integriteit gedurende het animatieproces te behouden. We tonen de generaliseerbaarheid van onze aanpak aan over verschillende tekst-naar-videomodellen en benadrukken de superioriteit van onze end-to-end methodologie ten opzichte van basismethoden, die mogelijk uit afzonderlijke taken bestaan. Door middel van kwantitatieve en kwalitatieve evaluaties demonstreren we de effectiviteit van ons raamwerk in het genereren van samenhangende tekstanimaties die gebruikersinstructies trouw interpreteren terwijl de leesbaarheid behouden blijft. Onze code is beschikbaar op: https://animate-your-word.github.io/demo/.

English

Text animation serves as an expressive medium, transforming static communication into dynamic experiences by infusing words with motion to evoke emotions, emphasize meanings, and construct compelling narratives. Crafting animations that are semantically aware poses significant challenges, demanding expertise in graphic design and animation. We present an automated text animation scheme, termed "Dynamic Typography", which combines two challenging tasks. It deforms letters to convey semantic meaning and infuses them with vibrant movements based on user prompts. Our technique harnesses vector graphics representations and an end-to-end optimization-based framework. This framework employs neural displacement fields to convert letters into base shapes and applies per-frame motion, encouraging coherence with the intended textual concept. Shape preservation techniques and perceptual loss regularization are employed to maintain legibility and structural integrity throughout the animation process. We demonstrate the generalizability of our approach across various text-to-video models and highlight the superiority of our end-to-end methodology over baseline methods, which might comprise separate tasks. Through quantitative and qualitative evaluations, we demonstrate the effectiveness of our framework in generating coherent text animations that faithfully interpret user prompts while maintaining readability. Our code is available at: https://animate-your-word.github.io/demo/.