做设计的伙伴都知道SD的强大,但是,对于使用是有一定的门槛的,熟练之后,做设计那是得心应手,特别是室内设计,建筑设计,好了,接下来,我们开始今天的分享。文末扫码可免费获取AI绘画资料。
一、SD模型三大在线平台
分享stable diffusion模型加载及线稿图转化的过程之前,我们先要熟悉三个在线平台,分别如下:
全球领先的模型站点:C站,civital
全球第二大模型站点:拥抱脸,hugging face
全球第三大模型站点:T站,吐司
二、效果展示
我们先来展示一下效果,
1、线稿生成效果图
这是一个空白的画布,当然,你也可以手绘。以下以专业的景观设计方向为例:
通过SD,只需几秒钟生成出效果,如下图所示:
当然,这里还没有充分调整VAE,通过多次尝试不同滤镜,效果将会更加出色。接下来,我们将展示一些世界三大模型网站的资源。
2、模型建筑效果图展示
3、衣服和鞋子
4、动物
stable diffusion 会根据这些基础模型的信息来创造出类似的画作。
三、模型介绍
在Stable Diffusion(SD)的左上方,我们可以看到Autumn Leaves包中目前只加载了一个名为"anything"的模型。
这个模型是一个大杂烩,汇聚了各种风格,包括风景、建筑、动漫人物等。但当你需要制作独特风格的图像时,就需要更为优化的模型。你可以选择自己训练模型,也可以先下载其他人已经训练好的模型。对于新手来说,建议从白嫖学起。
这里以"anything"和"architecturerealmix"(一种建筑模型)为例,演示如何生成建筑图,前提是所有参数相同,提示词一致:
"anything"模型:
"architecturerealmix"模型:
我们可以发现,使用特定模型生成特定风格的效果更好。这也是我们下载或训练模型的原因。
让我们了解当前流行的模型类型。
1、大模型
主模型(底层模型、核心模型、base model) 典型命名:附加后缀ckpt、safetensors 通常规模:2G-7G 存储位置:D:\tool\novelai-webui一键包\novelai-webui-aki\models\Sta
可以称之为主模型(大模型),即在开篇左上角介绍的anything和architecturerealmix。
2、Lora模型
Lora模型通常以ckpt、safetensors和pt为尾缀,大小约为100MB左右,存储在D:\tool\novelai-webui一键包\novelai-webui-akiioaetdra路径中。
这个也可以被称为滤镜模型,即一种能够使你的图片更加绚丽多彩的模型。
3、embeddings模型
这被称为嵌入模型,通常以“pt”为尾缀。大小通常在几十KB左右,存储路径位于D:\tool\novelai-webui一键包\novelai-webui-aki\embeddings。与其他模型不同,这个模型是用于反向训练的,它涉及的内容将在后续进行另外的解释。
4、美化VAE模型
美化VAE模型常见模式:尾缀ckpt、pt 模型名包含vae 存放路径:D:\tool\novelai-webui一键包\novelai-webui-aki\models\VAE
这个模型也可以称之为图像滤镜,使用它可以使你的图片更加绚丽多彩。
5、DreamBooth模型和LyCORIS模型
DreamBooth模型以及LyCORIS模型都与训练相关,对它们的详细说明将在后续进行。关于安装路径,你可以将下载好的模型文件直接拖放到上述提及的存放路径中。以下以architecturerealmix为例说明。
四、安装方法
在这之前,将模型从模型网下载好之后,只需简单地将其拖放到以下路径即可。以architecturerealmix为例:
1、大模型(底模型、主模型、base model) 常见模式:尾缀ckpt、safetensors 常见大小:2G-7G 存放路径:D:\tool\novelai-webui一键包\novelai-webui-aki\models\Stable
models(模型)
2、将下载好的architecturerealmix模型复制粘贴到相应目录后,重新启动sd-webui即可加载模型。
3、加载完成后,前往查找并打开controlNet插件,然后将线稿图放入其中。
在这里,使用的是线稿图。
生成的效果如下图所示。
在此过程中,有一个需要注意的参数。
控制权重,数值越大,生成的图像越接近原模型,数值越小,创造性越强。对于新手建议设置在0.7到0.75左右。
在右侧还有一个controlNet模型,这是源文件中带有的,但需要用户自行安装:
将其全部复制,粘贴到指定文件夹内。完成以上步骤后,再次重启模型即可。
在进行线稿图转模型时,请确保点击启用controlNet选项。如下图所示;
所有的AI设计工具,模型和插件,都已经整理好了,文末扫码即可免费获取噢~
写在最后
AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。
感兴趣的小伙伴,赠送全套AIGC学习资料和安装工具,包含AI绘画、AI人工智能等前沿科技教程,模型插件,具体看下方。
一、AIGC所有方向的学习路线
AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。
二、AIGC必备工具
工具都帮大家整理好了,安装就可直接上手!
三、最新AIGC学习笔记
当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
四、AIGC视频教程合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。