ComfyUI-Copilot: Een Intelligente Assistent voor Geautomatiseerde Workflowontwikkeling
ComfyUI-Copilot: An Intelligent Assistant for Automated Workflow Development
June 5, 2025
Auteurs: Zhenran Xu, Xue Yang, Yiyu Wang, Qingli Hu, Zijiao Wu, Longyue Wang, Weihua Luo, Kaifu Zhang, Baotian Hu, Min Zhang
cs.AI
Samenvatting
We introduceren ComfyUI-Copilot, een plugin aangedreven door een groot taalmodel, ontworpen om de bruikbaarheid en efficiëntie van ComfyUI te verbeteren, een open-source platform voor AI-gestuurde kunstcreatie. Ondanks zijn flexibiliteit en gebruiksvriendelijke interface kan ComfyUI uitdagingen bieden voor nieuwkomers, waaronder beperkte documentatie, modelmisconfiguraties en de complexiteit van workflowontwerp. ComfyUI-Copilot adresseert deze uitdagingen door intelligente aanbevelingen voor nodes en modellen te bieden, samen met geautomatiseerde éénklik workflowconstructie. De kern van het systeem maakt gebruik van een hiërarchisch multi-agent framework, bestaande uit een centrale assistent-agent voor taakdelegatie en gespecialiseerde werknemer-agenten voor verschillende toepassingen, ondersteund door onze samengestelde ComfyUI-kennisbanken om debugging en implementatie te stroomlijnen. We valideren de effectiviteit van ComfyUI-Copilot door zowel offline kwantitatieve evaluaties als online gebruikersfeedback, waaruit blijkt dat het nauwkeurig nodes aanbeveelt en workflowontwikkeling versnelt. Daarnaast illustreren use cases dat ComfyUI-Copilot de instapdrempel voor beginners verlaagt en de workflowefficiëntie voor ervaren gebruikers verbetert. Het installatiepakket van ComfyUI-Copilot en een demovideo zijn beschikbaar op https://github.com/AIDC-AI/ComfyUI-Copilot.
English
We introduce ComfyUI-Copilot, a large language model-powered plugin designed
to enhance the usability and efficiency of ComfyUI, an open-source platform for
AI-driven art creation. Despite its flexibility and user-friendly interface,
ComfyUI can present challenges to newcomers, including limited documentation,
model misconfigurations, and the complexity of workflow design. ComfyUI-Copilot
addresses these challenges by offering intelligent node and model
recommendations, along with automated one-click workflow construction. At its
core, the system employs a hierarchical multi-agent framework comprising a
central assistant agent for task delegation and specialized worker agents for
different usages, supported by our curated ComfyUI knowledge bases to
streamline debugging and deployment. We validate the effectiveness of
ComfyUI-Copilot through both offline quantitative evaluations and online user
feedback, showing that it accurately recommends nodes and accelerates workflow
development. Additionally, use cases illustrate that ComfyUI-Copilot lowers
entry barriers for beginners and enhances workflow efficiency for experienced
users. The ComfyUI-Copilot installation package and a demo video are available
at https://github.com/AIDC-AI/ComfyUI-Copilot.