ComfyUI-Copilot: 自動ワークフロー開発のためのインテリジェントアシスタント

ComfyUI-Copilot: An Intelligent Assistant for Automated Workflow Development

June 5, 2025

著者: Zhenran Xu, Xue Yang, Yiyu Wang, Qingli Hu, Zijiao Wu, Longyue Wang, Weihua Luo, Kaifu Zhang, Baotian Hu, Min Zhang

cs.AI

要旨

ComfyUI-Copilotを紹介します。これは、AIを活用したアート作成のためのオープンソースプラットフォームであるComfyUIの使いやすさと効率を向上させるために設計された、大規模言語モデルを活用したプラグインです。柔軟性とユーザーフレンドリーなインターフェースを備えているにもかかわらず、ComfyUIは新規ユーザーにとって、ドキュメントの不足、モデルの設定ミス、ワークフロー設計の複雑さといった課題を提示することがあります。ComfyUI-Copilotは、これらの課題に対処するために、インテリジェントなノードとモデルの推奨、および自動化されたワンクリックでのワークフロー構築を提供します。その中核では、タスク委任のための中央アシスタントエージェントと、異なる用途に対応する専門のワーカーエージェントからなる階層型マルチエージェントフレームワークを採用し、デバッグとデプロイを効率化するためにキュレーションされたComfyUIナレッジベースをサポートしています。ComfyUI-Copilotの有効性は、オフラインの定量的評価とオンラインユーザーフィードバックを通じて検証され、ノードの正確な推奨とワークフロー開発の加速が示されています。さらに、ユースケースでは、ComfyUI-Copilotが初心者の参入障壁を下げ、経験豊富なユーザーのワークフロー効率を向上させることが示されています。ComfyUI-Copilotのインストールパッケージとデモ動画は、https://github.com/AIDC-AI/ComfyUI-Copilotで入手可能です。

English

We introduce ComfyUI-Copilot, a large language model-powered plugin designed to enhance the usability and efficiency of ComfyUI, an open-source platform for AI-driven art creation. Despite its flexibility and user-friendly interface, ComfyUI can present challenges to newcomers, including limited documentation, model misconfigurations, and the complexity of workflow design. ComfyUI-Copilot addresses these challenges by offering intelligent node and model recommendations, along with automated one-click workflow construction. At its core, the system employs a hierarchical multi-agent framework comprising a central assistant agent for task delegation and specialized worker agents for different usages, supported by our curated ComfyUI knowledge bases to streamline debugging and deployment. We validate the effectiveness of ComfyUI-Copilot through both offline quantitative evaluations and online user feedback, showing that it accurately recommends nodes and accelerates workflow development. Additionally, use cases illustrate that ComfyUI-Copilot lowers entry barriers for beginners and enhances workflow efficiency for experienced users. The ComfyUI-Copilot installation package and a demo video are available at https://github.com/AIDC-AI/ComfyUI-Copilot.