UI Remix : Soutenir la conception d'interface utilisateur par la récupération et le remixage interactifs d'exemples
UI Remix: Supporting UI Design Through Interactive Example Retrieval and Remixing
January 26, 2026
papers.authors: Junling Wang, Hongyi Lan, Xiaotian Su, Mustafa Doga Dogan, April Yi Wang
cs.AI
papers.abstract
La conception d'interfaces utilisateur (UI) est une étape cruciale lors du lancement de produits, de la création de portfolios ou de la personnalisation de projets. Pourtant, les utilisateurs finaux sans expertise en design ont souvent du mal à formuler leur intention et à faire confiance aux choix de conception. Les outils existants basés sur des exemples favorisent soit une exploration large, ce qui peut entraîner un sentiment de submersion et une dérive conceptuelle, soit l'adaptation d'un seul exemple, risquant ainsi une fixation design. Nous présentons UI Remix, un système interactif qui soutient la conception d'UI mobiles via un workflow de conception piloté par les exemples. Propulsé par un modèle de génération augmentée par récupération multimodale (MMRAG), UI Remix permet la recherche itérative, la sélection et l'adaptation d'exemples aux niveaux global (interface entière) et local (composant). Pour instaurer la confiance, il présente des indicateurs de transparence des sources tels que les notations, le nombre de téléchargements et les informations sur le développeur. Dans une étude empirique menée auprès de 24 utilisateurs finaux, UI Remix a significativement amélioré la capacité des participants à atteindre leurs objectifs de conception, a facilité une itération efficace et a encouragé l'exploration de conceptions alternatives. Les participants ont également indiqué que les indicateurs de transparence des sources renforçaient leur confiance dans l'adaptation des exemples. Nos résultats suggèrent de nouvelles directions pour les systèmes pilotés par l'IA qui permettent aux utilisateurs finaux de concevoir avec un meilleur contrôle, une plus grande confiance et une ouverture accrue à l'exploration.
English
Designing user interfaces (UIs) is a critical step when launching products, building portfolios, or personalizing projects, yet end users without design expertise often struggle to articulate their intent and to trust design choices. Existing example-based tools either promote broad exploration, which can cause overwhelm and design drift, or require adapting a single example, risking design fixation. We present UI Remix, an interactive system that supports mobile UI design through an example-driven design workflow. Powered by a multimodal retrieval-augmented generation (MMRAG) model, UI Remix enables iterative search, selection, and adaptation of examples at both the global (whole interface) and local (component) level. To foster trust, it presents source transparency cues such as ratings, download counts, and developer information. In an empirical study with 24 end users, UI Remix significantly improved participants' ability to achieve their design goals, facilitated effective iteration, and encouraged exploration of alternative designs. Participants also reported that source transparency cues enhanced their confidence in adapting examples. Our findings suggest new directions for AI-assisted, example-driven systems that empower end users to design with greater control, trust, and openness to exploration.