前言
哈喽大家好,刚接触SD生成素材的时候,就想过能不能一步到位,直接生成带透明通道的图层,这期分享下ComfyUI中的这种插件,开始之前先来感受下
透明通道素材
1、安装插件
将zip的压缩包解压到以下路径
···\ComfyUI\custom_nodes
解压后将文件名改成
ComfyUI-layerdiffuse
在地址栏中输入CMD,在命令提示符里安装依赖
python.exe -m pip install --upgrade pip
2、下载必要模型
将模型放到以下路径
\ComfyUI\models\layer_model
【模型说明】(其实可以不用管具体模型的作用,全下就好):
layer_xl_transparent_attn.safetensors
一个LoRA,可将SDXL变成一个透明图像生成器。
layer_xl_transparent_conv.safetensors
将SDXL变成透明图像生成器的替代模型。
layer_xl_fg2ble.safetensors
该模型包括偏移量,将SDXL变成一个层生成模型,该模型基于前景,并生成融合的组合。
layer_xl_fgble2bg.safetensors
该模型包括偏移量,将SDXL变成一个层生成模型,该模型基于前景和融合的组合,并生成背景。
layer_xl_bg2ble.safetensors
该模型包括偏移量,将SDXL变成一个层生成模型,该模型基于背景,并生成融合的组合。
layer_xl_bgble2fg.safetensors
该模型包括偏移量,将SDXL变成一个层生成模型,该模型基于背景和融合的组合,并生成前景。
vae_transparent_encoder.safetensors
这是一个图像编码器,用于从像素空间提取潜在偏移量。该偏移量可以添加到潜在图像中,以帮助透明度的扩散。
vae_transparent_decoder.safetensors
这是一个图像解码器,输入为SD VAE输出和潜在图像,输出为真实的PNG图像。
本文涉及的工作流和插件,需要的朋友请扫描免费获取哦
3、搭建工作流
1)我们以基础工作流上做调整,在大模型和K采样器中间,添加一个Layer Diffuse Apply节点,根据自己的大模型选择类型
2)在Latent后添加Layer Diffuse Decode节点,与samples相连,VAE解码的图像节点与Layer Diffuse Decode节点的图像相连
右侧图像拉出一个【合并图像Alpha】节点,遮罩拉出一个【遮罩反转】节点。【遮罩反转】节点与【合并图像Alpha】节点的透明遮罩相连,这样就搭建好了
为了帮助大家更好地掌握 ComfyUI,我在去年花了几个月的时间,撰写并录制了一套ComfyUI的基础教程,共六篇。这套教程详细介绍了选择ComfyUI的理由、其优缺点、下载安装方法、模型与插件的安装、工作流节点和底层逻辑详解、遮罩修改重绘/Inpenting模块以及SDXL工作流手把手搭建。
由于篇幅原因,本文精选几个章节,详细版点击下方卡片免费领取
一、ComfyUI配置指南
报错指南 环境配置 脚本更新 后记 …二、ComfyUI基础入门
软件安装篇 插件安装篇 …三、 ComfyUI工作流节点/底层逻辑详解
ComfyUI 基础概念理解 Stable diffusion 工作原理 工作流底层逻辑 必备插件补全 …四、ComfyUI节点技巧进阶/多模型串联
节点进阶详解 提词技巧精通 多模型节点串联 …五、ComfyUI遮罩修改重绘/Inpenting模块详解
图像分辨率 姿势 …六、ComfyUI超实用SDXL工作流手把手搭建
Refined模型 SDXL风格化提示词 SDXL工作流搭建 …由于篇幅原因,本文精选几个章节,详细版点击下方卡片免费领取
总结
**文章总结:ComfyUI插件实现透明通道素材的详细指南****文章概况**: 文章介绍了如何在ComfyUI中通过安装特定插件与模型,实现直接生成带有透明通道的图层素材。内容涵盖了安装插件、下载必要模型、搭建工作流等步骤,并提供了ComfyUI基础教程的免费领取方式,旨在帮助用户更高效地利用ComfyUI进行图像创作。
**关键步骤总结如下**:
1. **安装插件**:
- 将压缩包解压到`\ComfyUI\custom_nodes`路径,并重命名为`ComfyUI-layerdiffuse`。
- 在命令提示符中使用Python升级pip并安装插件依赖。
2. **下载必要模型**:
- 下载多个`safetensors`模型文件至`\ComfyUI\models\layer_model`目录,包括用于生成透明图像的LoRA模型、前景与背景融合的不同层生成模型,以及用于透明度扩散的图像编解码器。
3. **搭建工作流**:
- 在现有的工作流基础上,添加`Layer Diffuse Apply`节点,根据所使用的大模型选择类型。
- 在`Latent`后连接`Layer Diffuse Decode`节点,并连接相应的VAE解码图像节点。
- 使用`合并图像Alpha`节点与`遮罩反转`节点完成透明遮罩的连接,构建完整的图像生成流程。
**附加资源:**
- 作者提供了ComfyUI基础教程的免费领取方式,该教程包含六个章节,详细介绍了ComfyUI的各个方面,从配置指南到工作流搭建等,适合初学者进阶学习。
**总结:**
本文为ComfyUI用户提供了一套完整的指南,通过安装插件与模型,调整工作流,实现了直接生成带透明通道图层素材的目标。同时,提供的基础教程资源进一步助力用户深层次理解和掌握ComfyUI的强大功能。