什么是ComfyUI ？

ComfyUI是一个基于节点流程的Stable Diffusion操作界面。以下是关于它的详细介绍：

• 特点与优势
  • 高度可定制：提供丰富的节点类型，涵盖文本处理、图像处理、模型推理等功能。用户可根据需求自由组合节点，构建个性化的图像生成流程，实现更精细化的控制。
  • 可复现性强：可以将工作流程保存为JSON文件，方便用户分享和复用。这意味着用户能够准确地重复特定的图像生成过程，也便于在不同用户之间交流和共享优秀的工作流程。
  • 易用性高：尽管界面上满是工作节点，初次接触可能会觉得复杂，但实际上其逻辑直观。提供了直观的用户界面，包括工作流程编辑器、参数配置面板和预览窗口等，即使没有编程经验的用户也能轻松使用。
  • 轻量高效：比Stable Diffusion更省内存，出图速度更快，对硬件要求低，3G以上内存即可出图。它还具有智能内存管理功能，能自动在显存低至1GB的GPU上运行模型，甚至在没有GPU的情况下也能使用CPU运行（速度较慢）。
• 功能
  • 支持多种模型：支持Stable Diffusion的多种版本，如SD 1.x、SD 2.x、SDXL等，还支持其他扩散模型如Flux、Tencent’s Hunyuan - dit等，以及视频模型如Stable Video Diffusion、CogVideo等，能满足不同用户对于图像和视频生成的需求。
  • 节点式操作：将Stable Diffusion的推理过程拆解为不同的节点，每个节点代表一个特定的功能或操作，如加载模型、指定提示词、采样器、调度器、VAE解码器、面部修复和超分模型等。用户通过拖拽节点并连线的方式构建图像生成工作流程，清晰地了解图像生成的整个过程。
  • 工作流模板丰富：内置大量预设的工作流模板，用户可一键加载，轻松实现人像生成、背景替换、图像动画化、老照片修复上色、一键换脸等复杂操作。
• 应用场景
  • 艺术创作：数字艺术家可以利用其高度可定制的特点，创作出各种风格独特、富有创意的艺术作品，如超逼真的3D人物形象、风格化的插画等。
  • 产品设计：产品设计师可以通过ComfyUI快速生成产品的效果图、概念图，进行产品外观设计、包装设计等方面的创意探索。
  • 教育领域：可用于教学演示，帮助学生更好地理解AI图像生成的原理和过程，激发学生对AI和创意设计的兴趣。
  • 娱乐行业：在游戏开发中，可用于生成游戏角色、场景等美术资源；在影视制作中，可辅助进行概念设计、特效制作等工作。
• 技术组件
  • 节点管理器：提供丰富的节点类型，涵盖文本处理、图像处理、模型推理等功能。
  • 工作流程编辑器：提供直观的界面，用户可以拖拽节点并连线的方式构建工作流程。
  • 参数配置面板：允许用户配置节点参数，控制图像生成效果。
  • 预览窗口：实时显示图像生成结果。
• 运行与更新：2024年发布的v1.0桌面版本，软件包仅200m，用户下载后无需手动集成Python环境和拉更新分支，可自动更新，支持Windows/macOS/Linux平台。

安装部署（没gpu算力就用cpu 版本）

git clone https://github.com/comfyanonymous/ComfyUI
cd ComfyUI
grep -v 'torchaudio\|torchvision' requirements.txt > temp_requirements.txt
pip install -r temp_requirements.txt
python main.py --listen --cpu

模型下载

https://civitai.me/sd
CivitAI 站点更偏向于 UGC 一些，所以你会看到更多个人训练的模型，但是这并不意味着它们的质量会差，相反，你会发现有些模型的质量非常好。

而且 CivitAI 比 HuggingFace 多了很多好用的功能，比如你可以通过筛选等方式，看到各种各样优秀的模型：

目录地址

cd /mnt/workspace/ComfyUI/models/checkpoints

git clone https://www.modelscope.cn/models/AI-ModelScope/stable-diffusion-v1-5.git

文生图例子

参考地址

https://github.com/comfyanonymous/ComfyUI
https://civitai.com/api/download/models/64558