当前位置:AIGC资讯 > AIGC > 正文

Stable Diffusion低显存也能跑大图了,再也不用怕爆显存!

Stable Diffusion(以下简称SD)是一款很强大的AI绘画软件,很多人都会拿SD和MJ(Midjourney)作对比,其中最重要的一点就是使用门槛上,SD需要最低也是4GB的显存,如果显存低了是没办法获得很好的体验的,最佳的配置是12-24GB 基本上所有的功能都能用。现在pkuliyi2015大佬开发了一个免费插件Tiled Diffusion(插件安装目录文件夹:extensions),可以大幅度减少SD生图所需的显存,其工作原理就是将一张图不同的块,通过连续生成图块,然后再合并成一张图,再也不用–lowvram 或 --medvram指令降低作画的质量了。

Tiled Diffusion界面

主要功能:

1、可以轻松做出超高质量的图像放大,即使是8K的图 也只需要12G显存。

2、当你不想大幅度的改变人像时,特别适合于人像放大,可以达到无损放大的程度。

3、X4的放大比例,如果你的电脑平时只敢开X2放大,现在X4放大也不会爆显存了,去噪强度建议设置0.4。

4、Img2img 放大,默认参数下,选择Tiled Diffusion的X4放大,只需要1分钟

左右,如果是X2放大,只需要10秒。

5、使用ControlNet插件的canny 2560 * 1280重绘,效果如图:


canny线稿图

canny重绘效果图

安装教程:

软件直装:打开SD网页版地址,选择拓展-从网址安装-输入插件地址: https://github.com/pkuliyi2015/multidiffusion-upscaler-for-automatic1111 点击“安装”,如果国内网络不稳定,可以在github前面加个K变成kgithub,就会变成从国内的网站安装,速度大大提高。

sd插件安装方法

压缩包安装:打开项目地址,点击code,然后点击下面弹出来的download zip 这样就会用压缩包的形式下载下来,再把压缩包解压到extensions文件夹里面即可。这样安装后期更新还是一样的方法,PS:不如网址直接安装方便,点击SD拓展-在线更新即可自动下载更新了。

sd插件安装方法

使用方法:

插件安装后,你可以直接使用软件默认的设置,只需要打开“启用”即可,英文版的是打开Enable。如果生成的图像比较模糊或者颜色灰暗,需要打开模型对应的VAE进行颜色修复。如果还是爆显存了,需要把各个tile调小。

Tiled Diffusion示例图

如图所示,一张完整的图都被分成了不同的块,这个插件使用起来就会把原图分成的小块一遍一遍的分割和融合,最终生成我们想要的图,如果你没有生成高清大图的需求,建议关掉这个功能,这会让你生成图的速度变慢。

块的大小和重叠数量决定了生成图的速度,如果你把块的宽度和高度设置的很低就会生成更多的小块,需要的时间也就更多,建议块的宽度和高度设置96或者128以提高生成速度,分块重叠个数建议在使用MultiDiffusion功能的时候设置32或者48,使用Mixture of Diffusers 选择16或32,与 MultiDiffusion 相比,Mixture of Diffusers 需要较少的重叠,两者使用的方法不太一样。

Stable Diffusion生成的图

区域提示语控制

因为每个块都共享顶部一样的主提示词,所以你没有办法将两个不同风格的事物放在一起,但是这个插件可以通过区域提示词分别控制不同的区块,比如左边你可以通过不同的lora设置一个赛博朋克风格人物,右边区域设置一个汉服风格人物,这样就实现了不同时期的人同框了,打开绘制完整的画布背景就可以实现在同一个背景下了。

使用方法:把分区控制功能打开,然后选择想要设置的不同的分区数,以上面的介绍为例,我们需要设置两个不同的区域,把区域1和区域2都打开,然后设置宽度和高度达到占满整幅画的目的,如果不占满就会出现不同的噪点和色块。这样我们就可以在区域1写上单独的提示词和反向提示词,embedding的NG_DeepNegative_V1_75T也是可以使用的。如果你想自己绘制图像,可以选择前景,否则就选择背景,因为分区域已经写了相关的人物提示词,所以在顶部的提示词框就可以不写了,只需要写masterpiece, best quality, (realistic, photo-realistic:1.4)等质量提示词,不需要提到任何具象化的东西,不然生成的图会很糟糕。


MultiDiffusion分区控制

总之,如果你是小显存,那就装它 装它 装它!如果你想生成很大很大的图,那就装它 装它 装它!

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

👉[[CSDN大礼包:《StableDiffusion安装包&AI绘画入门学习资料》免费分享]](安全链接,放心点击)

对于0基础小白入门:

如果你是零基础小白,想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画!

零基础AI绘画学习资源介绍

👉stable diffusion新手0基础入门PDF👈

(全套教程文末领取哈)

👉AI绘画必备工具👈

👉AI绘画基础+速成+进阶使用教程👈

观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

温馨提示:篇幅有限,已打包文件夹,获取方式在:文末

👉大厂AIGC实战案例👈

光学理论是没用的,要学会跟着一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。

👉12000+AI关键词大合集👈


这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

总结

本文介绍了一款强大的AI绘画软件Stable Diffusion及其免费插件Tiled Diffusion。Stable Diffusion在使用门槛上较高,需要较高的显存配置以获得良好体验,而Tiled Diffusion插件可大幅降低所需显存,提高图像生成质量和速度。该插件通过分割和合并图像块的方式进行高清图像放大、人像放大及Img2img放大等操作,同时提供区域提示语控制功能以实现不同风格事物同框。对于小显存用户或需要生成大尺寸图像的用户来说,这款插件具有极高的实用价值。此外,文章还提到了AI绘画技术储备的重要性,并分享了全套的AI绘画学习资料,包括安装包、新手入门PDF、基础速成进阶教程等,帮助读者从零基础系统性的学好AI绘画。

更新时间 2024-07-13