当前位置:AIGC资讯 > AIGC > 正文

【AI绘画】Stable Diffusion学习——入门教程和模型介绍(二)

一、Web界面

Stable Diffusion Web UI界面参数说明:

二、大模型

Stable Diffusion 模型俗称大模型(Checkpoint),是最重要的模型,有它才可以生成图像,用于确立基本画风。
文件的存放路径:根目录\models\Stable-diffusion

推荐两个大模型
① Stable Diffusion开源的1.5版本模型(偏真实风格)

模型下载地址:https://huggingface.co/runwayml/stable-diffusion-v1-5/tree/main

② AbyssOrangeMix(外网非常受欢迎的二次元风模型,俗称“深渊橘”模型)

模型下载地址:https://civitai.com/models/4437/abyssorangemix2-sfwsoft-nsfw

注意:模型下载网址需要科学上网哟~

来一波福利—— 在这里给大家整理了一些模型下载的网站:

抱脸网站(Huggingface):主要提供主流 AI 绘画模型下载。 SD - WebUI资源站(123114514.xyz):页面简洁,分类明确;游戏人物模型和画师风格模型比较多; C站(Civitai):AI艺术共享平台,可下载海量SD开源模型(推荐)。 哩布哩布ai网站(LiblibAI):中国领先原创AI模型分享社区,其界面风格与C站极为相似(推荐)。 吐司ai(TusiArt):一个国内可用、免费在线生成图像的AI绘画模型分享社区。

三、VAE模型

VAE全称叫做“变分自解码器”,负责将加噪后的潜空间数据转化为正常的图像,理解为AI绘图的一种“调色滤镜”。
文件的存放路径:根目录\models\Stable-diffusion 或 models\VAE

四、Embedding 模型

俗称嵌入式模型,也叫做Textual Inversion,通俗的讲其实就是把提示词打包成为一个提示词的词包,在提示词中加入对应的关键词即可使用。常作为反向提示词使用,减小出错概率,提升出图质量下限。

文件的存放路径:根目录\embeddings

五、Lora模型

全称:Low-Rank Adaptation Models 翻译成中文叫做 大模型的“低秩适应”,常用于固定角色特征和风格化。
Lora是需要和一个大的Checkpoint一起搭配使用的,从而实现对这个Checkpoint在某些方面的“微调”。
Lora文件是可以随意重命名的,尽量用纯英文且不包括空格的方式来命名。

lora有两种形式,使用方法有三种:
① lora原生
文件的存放路径:根目录\models\Lora

第一种用法,是直接在提示词里输入,比如:lora:hanfu_v3:0.75

第二种用法,附加模型选单,选择其中一个lora就可以添加到正向或反向提示词中
② lora插件
文件的存放路径:根目录\extensions\sd-webui-additional-networks\models\lora

第三种用法,附件网络扩展(与提示词撰写是完全独立分开的,不会出现在提示词里)

扩展插件:Additional Network
安装方法:可通过扩展-可下载-搜索“Network”找到Kohya-ss Additional Networks,点击安装,然后重启Web UI即安装成功

注意:通过扩展插件读取的Lora目录,默认是在extensions文件夹内(建议将两个lora的路径统一起来,可以方便地使用任何一种方式调用LoRA)
在Web UI界面-设置,找到下面控制插件的Additional Network,将 根目录\models\Lora 目录地址拷贝进来,保存设置,刷新一下,再到扩展插件使用

六、Hypemetwork 模型

Hypernetwork 中文名(超网络)类似于低配版的LoRA模型,但因为训练难度高已被淘汰;
文件的存放路径:根目录\models\hypernetworks

AI 绘画Stable Diffusion 研究(十六)SD Hypernetwork详解

七、模型安装位置

下载模型后需要将之放置在指定的目录下,推荐一个简单的安装方法
B站 秋葉aaaki 大佬提供的网站:Stable Diffusion 法术解析

八、总结

模型名称 文件大小 安装目录 文件格式 Stable Diffusion 模型(Checkpoint) 几GB \models\Stable-diffusion .ckpt
.safetensors 外挂 VAE 模型(VAE) 几百MB \models\VAE .vae 嵌入式(T.I Embeddings) 几十KB \extensions .pt 低秩模型(Lora) 几十到一百多MB \models\Lora .safetensors 超网络(Hypemetwork) 几十MB \models\hypernetworks .safetensors

SD的模型使用规则为:大模型 + 拓展模型
其中Checkpoint是大模型,其余皆为拓展模型,大模型可以单独使用,拓展模型必须搭配大模型使用

以上是本次分享全部内容。
非常感谢您阅读本篇博客文章。希望这篇文章能够为您提供有价值的信息,并帮助您解决问题或增长知识。如果您对文章内容有任何问题、建议或反馈。同时,也欢迎您继续关注我的博客,获取更多有趣、实用的内容。
期待与您在下一篇文章再次见面。谢谢!

更新时间 2024-02-28