一、前言
大家在使用Stable Diffusion(简称SD)时,通常是通过网页界面进行操作的。但你们有没有听说过ComfyUI呢?
ComfyUI是一个建立在节点流程上的SD操作界面。它通过流程节点来实现更细致的工作流定制以及更好的可复现性。
每个节点都承担着特定的功能,用户可以通过调节这些节点之间的连接来改变最终生成的图像效果。
尽管节点式的工作流程略微提高了使用的门槛,但它的内部生成过程经过优化,使得图片生成的速度比标准的网页界面更快,同时对显存的要求也降低了(仅需4GB显存即可流畅运行)。
二、WebUI 与 ComfyUI 对比
优点包括:
显存使用效率高,启动及图像生成速度均较快; 提供更广泛的创作空间; 能够与webui环境及模型互通; 支持个性化工作流构建,流程可导出与分享,错误定位明确; 导入生成图片能自动重现工作流程,并自动选择合适的模型。缺点则为:
使用门槛相对较高,需要用户具备较强的逻辑思维能力; 相对于webui,其生态圈尚在发展中(尽管常用功能一应俱全),但也孕育了一些专为ComfyUI打造的有趣插件。三、下载安装
github源码地址
https://github.com/comfyanonymous/ComfyUI
下载整合依赖包:
https://pan.baidu.com/s/1oGgGXU49ct0zD6az24lRJw?pwd=rpth
整合包中的启动器,仅支持windows x64系统,GPU/CPU 皆可运行,使用chrome浏览器,win10中使用edge可能出现无法加载的情况
四、模型下载
ComfyUI 虽然部署好环境和依赖,但是里面没有模型,我们需要把模型放到对应位置大模型放入 "offlineaitools_ComfyUI\offlineaitools\ComfyUI\models\checkpoints"
VAE 模型放入 “offlineaitools_ComfyUI\offlineaitools\ComfyUI\models\vae”
Lora 模型 “offlineaitools_ComfyUI\offlineaitools\ComfyUI\models\loras”
2. 共享WebUI模型
在offlineaitools_ComfyUI\offlineaitools\ComfyUI目录下创建extra_model_paths.yaml 文件填写以下内容,便可加载模型
a111:
base_path: 这里替换为sd_webui根目录,必须是绝对路径
checkpoints: models/Stable-diffusion
configs: models/Stable-diffusion
vae: models/VAE
loras: |
models/Lora
models/LyCORIS
upscale_models: |
models/ESRGAN
models/RealESRGAN
models/SwinIR
embeddings: embeddings
hypernetworks: models/hypernetworks
controlnet: models/ControlNet
五、常用插件安装
进入offlineaitools_ComfyUI\offlineaitools\ComfyUI\custom_nodes目录,启动PowerShell使用git命令安装插件
1.ComfyUI 管理器
git clone https://github.com/ltdrdata/ComfyUI-Manager.git
2.界面汉化
git clone https://github.com/AIGODLIKE/AIGODLIKE-COMFYUI-TRANSLATION
3.补全显示
git clone https://github.com/pythongosssss/ComfyUI-Custom-Scripts
4.中文提示词
git clone https://github.com/AlekPet/ComfyUI_Custom_Nodes_AlekPet
5.图像比例计算
git clone https://github.com/Derfuu/Derfuu_ComfyUI_ModdedNodes.git
6.分块放大插件
git clone https://github.com/BlenderNeko/ComfyUI_TiledKSampler.git