1 stable diffusion技术介绍
2 常用资源
社区:
civitai : 主流的AI绘画模型分享网站, 可以看大家分享出来的模型和生成的图像。
但是国内用户要访问这个网站, 需要科学上网。
aigccafe 这个是civitai的国内镜像网站,推荐使用这个。
代码:
stable difffusion 原始代码:v1版本: https://github.com/CompVis/stable-diffusion
v2版本: https://github.com/Stability-AI/stablediffusion
这是原始的代码,如果想要学习技术的话, 建议看这些原始代码。 网上各种应用基本都是基于这个修改和封装, 不容易看懂。
当然直接用原始代码是有一定技术门槛的,只是做应用的话其实完全没必要从原始代码开始。
stable-diffusion-webui
这是目前大家最常用的工具,是一个Gradio库开发的浏览器UI界面,其后端依旧是Stable Diffusion以及一系列相关的工具包。其优点是操作简单,调参方便,方便分享模型,并且方便组合各种模块,非常适合广大没有相关基础的人使用。
上面的stable-diffusion-webui门槛已经比较低了, 适合大多数人使用, 但依然有一些技术门槛, 主要是环境配置。
所以也有大神推出了整合包, 可以无脑安装使用, 适合完全的新手小白。 比较出名的有b站up主秋葉aaaki 的整合包和b站up主朱尼酱的整合包。
这些整合包是在stable-diffusion-webui的基础上做了进一步封装, 简化了安装和使用。
3 微调技术
3.1 LoRA
原理参考:LoRA微调方法详解
3. 2 controlNet
3.3 dreambooth
参考:
https://zhuanlan.zhihu.com/p/611310582