当前位置:AIGC资讯 > AIGC > 正文

【Stable Diffusion】ComfyUI-插件-生成透明通道素材!

前言

哈喽大家好,刚接触SD生成素材的时候,就想过能不能一步到位,直接生成带透明通道的图层,这期分享下ComfyUI中的这种插件,开始之前先来感受下

透明通道素材

1、安装插件

将zip的压缩包解压到以下路径

···\ComfyUI\custom_nodes

解压后将文件名改成

ComfyUI-layerdiffuse

在地址栏中输入CMD,在命令提示符里安装依赖

python.exe -m pip install --upgrade pip

2、下载必要模型

将模型放到以下路径

\ComfyUI\models\layer_model

【模型说明】(其实可以不用管具体模型的作用,全下就好):

layer_xl_transparent_attn.safetensors

一个LoRA,可将SDXL变成一个透明图像生成器。

layer_xl_transparent_conv.safetensors

将SDXL变成透明图像生成器的替代模型。

layer_xl_fg2ble.safetensors

该模型包括偏移量,将SDXL变成一个层生成模型,该模型基于前景,并生成融合的组合。

layer_xl_fgble2bg.safetensors

该模型包括偏移量,将SDXL变成一个层生成模型,该模型基于前景和融合的组合,并生成背景。

layer_xl_bg2ble.safetensors

该模型包括偏移量,将SDXL变成一个层生成模型,该模型基于背景,并生成融合的组合。

layer_xl_bgble2fg.safetensors

该模型包括偏移量,将SDXL变成一个层生成模型,该模型基于背景和融合的组合,并生成前景。

vae_transparent_encoder.safetensors

这是一个图像编码器,用于从像素空间提取潜在偏移量。该偏移量可以添加到潜在图像中,以帮助透明度的扩散。

vae_transparent_decoder.safetensors

这是一个图像解码器,输入为SD VAE输出和潜在图像,输出为真实的PNG图像。

本文涉及的工作流和插件,需要的朋友请扫描免费获取哦

3、搭建工作流

1)我们以基础工作流上做调整,在大模型和K采样器中间,添加一个Layer Diffuse Apply节点,根据自己的大模型选择类型

2)在Latent后添加Layer Diffuse Decode节点,与samples相连,VAE解码的图像节点与Layer Diffuse Decode节点的图像相连

右侧图像拉出一个【合并图像Alpha】节点,遮罩拉出一个【遮罩反转】节点。【遮罩反转】节点与【合并图像Alpha】节点的透明遮罩相连,这样就搭建好了

为了帮助大家更好地掌握 ComfyUI,我在去年花了几个月的时间,撰写并录制了一套ComfyUI的基础教程,共六篇。这套教程详细介绍了选择ComfyUI的理由、其优缺点、下载安装方法、模型与插件的安装、工作流节点和底层逻辑详解、遮罩修改重绘/Inpenting模块以及SDXL工作流手把手搭建。

由于篇幅原因,本文精选几个章节,详细版点击下方卡片免费领取

一、ComfyUI配置指南

报错指南 环境配置 脚本更新 后记 …

二、ComfyUI基础入门

软件安装篇 插件安装篇 …

三、 ComfyUI工作流节点/底层逻辑详解

ComfyUI 基础概念理解 Stable diffusion 工作原理 工作流底层逻辑 必备插件补全 …

四、ComfyUI节点技巧进阶/多模型串联

节点进阶详解 提词技巧精通 多模型节点串联 …

五、ComfyUI遮罩修改重绘/Inpenting模块详解

图像分辨率 姿势 …

六、ComfyUI超实用SDXL工作流手把手搭建

Refined模型 SDXL风格化提示词 SDXL工作流搭建 …

由于篇幅原因,本文精选几个章节,详细版点击下方卡片免费领取

总结

**文章总结:ComfyUI插件实现透明通道素材的详细指南**
**文章概况**: 文章介绍了如何在ComfyUI中通过安装特定插件与模型,实现直接生成带有透明通道的图层素材。内容涵盖了安装插件、下载必要模型、搭建工作流等步骤,并提供了ComfyUI基础教程的免费领取方式,旨在帮助用户更高效地利用ComfyUI进行图像创作。
**关键步骤总结如下**:
1. **安装插件**:
- 将压缩包解压到`\ComfyUI\custom_nodes`路径,并重命名为`ComfyUI-layerdiffuse`。
- 在命令提示符中使用Python升级pip并安装插件依赖。
2. **下载必要模型**:
- 下载多个`safetensors`模型文件至`\ComfyUI\models\layer_model`目录,包括用于生成透明图像的LoRA模型、前景与背景融合的不同层生成模型,以及用于透明度扩散的图像编解码器。
3. **搭建工作流**:
- 在现有的工作流基础上,添加`Layer Diffuse Apply`节点,根据所使用的大模型选择类型。
- 在`Latent`后连接`Layer Diffuse Decode`节点,并连接相应的VAE解码图像节点。
- 使用`合并图像Alpha`节点与`遮罩反转`节点完成透明遮罩的连接,构建完整的图像生成流程。
**附加资源:**
- 作者提供了ComfyUI基础教程的免费领取方式,该教程包含六个章节,详细介绍了ComfyUI的各个方面,从配置指南到工作流搭建等,适合初学者进阶学习。
**总结:**
本文为ComfyUI用户提供了一套完整的指南,通过安装插件与模型,调整工作流,实现了直接生成带透明通道图层素材的目标。同时,提供的基础教程资源进一步助力用户深层次理解和掌握ComfyUI的强大功能。

更新时间 2024-07-30