当前位置:AIGC资讯 > AIGC > 正文

AIGC绘画入门教学之stablediffusion教程

在大模型开启的 AIGC 时代,由明星 AI 初创公司 Stability AI打造的文本到图像生成模型
Stable Diffusion 可谓风靡全球。

虽然从文本到图像的生成模型并不少,但Stable Diffusion 是最受欢迎的开源模型。各路开发者也基于 Stable Diffusion 模型进行二创,推出各种各样、花式繁多的 AIGC
应用。

刚刚,Stability AI 正式推出了 Stable Diffusion XL(SDXL)1.0。文本到图像生成模型,又完成了进化过程中的一次重要迭代。

这是 Stability AI最新的旗舰图像模型,也是当前图像生成领域最好的开源模型。

在 SDXL 1.0 版本发布之前,Stability AI 在六月份推出的 SDXL 0.9 仅作研究用途。但从今天起,SDXL 1.0 将通过
Stability AI 的 API 开源开放给开发者,普通人也可以通过消费级应用 Clipdrop 和 DreamStudio 访问。

如何马上体验到 SDXL 1.0?目前有几种渠道:

Clipdrop:https://clipdrop.co/stable-diffusion

DreamStudio:https://dreamstudio.ai/generate

Stability AI Platform:https://platform.stability.ai/

Github:https://github.com/Stability-AI/generative-models

此外,鉴于与亚马逊的密切合作关系,SDXL 1.0 已经登陆亚马逊云科技的基础模型托管服务 Amazon Bedrock,而且还会登陆 Amazon
SageMaker JumpStart。

SDXL 1.0,什么进化了?

1. 生成概念与风格更具挑战的作品

SDXL 1.0
几乎能够生成任何艺术风格的高质量图像,并且是实现逼真效果的最佳开源模型。用户可以在没有任何特定的「灵感」的情况下进行提示,确保风格的绝对自由,生成各具特色的图像。SDXL
1.0 在色彩的鲜艳度和准确度方面做了很好的调整,对比度、光线和阴影都比上一代更好,并全部采用原生 1024x1024 分辨率。

除此之外,SDXL 1.0 可以生成图像模型难以渲染的概念,例如手、文本以及空间的排列。

图源:Stability AI 官网

图源:Stability AI 官网

2. 语言更简洁、更智能

SDXL 1.0 只需几句话就能创建复杂、细致、美观的图像。用户不再需要用华丽的辞藻进行修饰就能够获得想要的高质量图像。

它甚至能够区分「The Red Square」(红场,一个著名景点)和「red square」(红色正方形)。

3. 微调和高级控制

有了 SDXL 1.0 ,根据自定义数据对模型进行微调比以往任何时候都要容易。可生成自定义 LoRA 或检查点,减少数据处理的需要。Stability AI
正在利用专门用于 SDXL 的 T2I / ControlNet
构建下一代任务特定结构、样式和组成控制。这些功能目前处于测试预览阶段,可以随时关注微调的更新。SDXL 1.0 上的图像控制也即将推出。

自 4 月 13 日发布 SDXL beta 版本以来,ClipDrop 用户已经使用该模型生成超过 3500 万张图片,而 Stability AI 的
Discord 社区平均每天生成 2 万张图片。

看看用户使用 SDXL 1.0 的效果吧。

推特:@pratzlowcode

从网友的图片生成效果来看,SDXL 1.0 在光线上把握更加精准,光线效果、色彩对比更加真实。

推特:@foxtrotfrog

可以看到,在色彩的运用上,SDXL 1.0 更加大胆,饱和度较高的情况下光线与阴影的细节依然在线。

推特:@ai_for_success

在这张图片中可以看到,景深较为合适,主体突出,色彩之间的过渡,甚至真实度都十分优秀。

推特:@sizubito

网友制作了 SDXL 0.9 与 SDXL 1.0 的对比图,左边为 SDXL 0.9 生成图像,右边为 SDXL 1.0
生成图像。可以明显看出二者对于色彩运用的差距。SDXL 1.0 的色彩更加丰富且真实,光效表现也更加出色。

也有网友在 SDXL 1.0 中使用 Midjourney 中的旧 prompt,评论中纷纷感叹,它的效果不比 Midjourney
差,甚至有些出乎意料的优秀。

SDXL 1.0 细节:Base 和 Refiner 模型

Stability AI 将 SDXL 1.0 与各种模型进行了对比测试:与 Stable Diffusion1.5/2.1、SDXL 0.9
等模型相比,人们更喜欢由 SDXL 1.0 生成的图像。

SDXL 1.0 也是所有开放式图像模型中参数量最多的模型之一,它建立在一个创新的新架构上,由一个 35 亿参数的基础模型和一个 66
亿参数的细化模型组成。

完整模型包括一个用于潜在扩散的专家混合管道:第一步,基础模型生成(噪声)潜在变量,然后用专门用于最终去噪步骤的细化模型对其进行进一步处理。

基础模型也可以作为独立模块使用。细化模型为基础模型的输出添加更精确的颜色、更高的对比度和更精细的细节。

这种两阶段架构可确保图像生成的稳健性,而且不会影响速度或需要过多的计算资源。SDXL 1.0 可在配备 8GB VRAM 的消费级 GPU
或随时可用的云实例上有效运行。

最后想说

AIGC(AI Generated
Content)技术,即人工智能生成内容的技术,具有非常广阔的发展前景。随着技术的不断进步,AIGC的应用范围和影响力都将显著扩大。以下是一些关于AIGC技术发展前景的预测和展望:

1、AIGC技术将使得内容创造过程更加自动化,包括文章、报告、音乐、艺术作品等。这将极大地提高内容生产的效率,降低成本。2、在游戏、电影和虚拟现实等领域,AIGC技术将能够创造更加丰富和沉浸式的体验,推动娱乐产业的创新。3、AIGC技术可以帮助设计师和创意工作者快速生成和迭代设计理念,提高创意过程的效率。

未来,AIGC技术将持续提升,同时也将与人工智能技术深度融合,在更多领域得到广泛应用。

针对各位AIGC初学者,这里列举了一条完整的学习计划,感兴趣的可以阅读看看,希望对你的学习之路有所帮助,废话不多说,进入正题:目标应该是这样的:

第一阶段(30天):AI-GPT从入门到深度应用

该阶段首先通过介绍AI-GPT从入门到深度应用目录结构让大家对GPT有一个简单的认识,同时知道为什么要学习GPT使用方法。然后我们会正式学习GPT深度玩法应用场景。

-----------

GPT的定义与概述 GPT与其他AI对比区别 GPT超强记忆力体验 万能GPT如何帮你解决一切问题? GPT表达方式优化 GPT多类复杂应用场景解读 3步刨根问底获取终极方案 4步提高技巧-GPT高情商沟通 GPT深度玩法应用场景 GPT高级角色扮演-教学老师 GPT高级角色扮演-育儿专家 GPT高级角色扮演-职业顾问 GPT高级角色扮演-专业私人健身教练 GPT高级角色扮演-心理健康顾问 GPT高级角色扮演-程序UX/UI界面开发顾问 GPT高级角色扮演-产品经理 GPT高级技巧-游戏IP角色扮演 GPT高级技巧-文本冒险游戏引导 GPT实操练习-销售行业 GPT实操练习-菜谱推荐 GPT实操练习-美容护肤 GPT实操练习-知识问答 GPT实操练习-语言学习 GPT实操练习-科学减脂 GPT实操练习-情感咨询 GPT实操练习-私人医生 GPT实操练习-语言翻译 GPT实操练习-作业辅导 GPT实操练习-聊天陪伴 GPT实操练习-育儿建议 GPT实操练习-资产配置 GPT实操练习-教学课程编排 GPT实操练习-活动策划 GPT实操练习-法律顾问 GPT实操练习-旅游指南 GPT实操练习-编辑剧本 GPT实操练习-面试招聘 GPT实操练习-宠物护理和训练 GPT实操练习-吸睛爆款标题生成 GPT实操练习-自媒体爆款软件拆解 GPT实操练习-自媒体文章创作 GPT实操练习-高效写作推广方案 GPT实操练习-星座分析 GPT实操练习-原创音乐创作 GPT实操练习-起名/解梦/写诗/写情书/写小说 GPT提升工作效率-Word关键字词提取 GPT提升工作效率-Word翻译实现 GPT提升工作效率-Word自动填写、排版 GPT提升工作效率-Word自动纠错、建议 GPT提升工作效率-Word批量生产优质文章 GPT提升工作效率-Excel自动化实现数据计算、分析 GPT提升工作效率-Excel快速生成、拆分及合并实战 GPT提升工作效率-Excel生成复杂任务实战 GPT提升工作效率-Excel用Chat Excel让效率起飞 GPT提升工作效率–PPT文档内容读取实现 GPT提升工作效率–PPT快速批量调整PPT文档 GPT提升工作效率-文件批量创建、复制、移动等高效操作 GPT提升工作效率-文件遍历、搜索等高效操作 GPT提升工作效率-邮件自动发送 GPT提升工作效率-邮件自动回复 GPT接入QQ与QQ群实战 GPT接入微信与微信群实战 GPT接入QQ与VX多用户访问实战 GPT接入工具与脚本部署实战

第二阶段(30天):AI-绘画进阶实战

该阶段我们正式进入AI-绘画进阶实战学习,首先通过了解AI绘画定义与概述 ,AI绘画的应用领域 ,PAI绘画与传统绘画的区别 ,AI绘画的工具分类介绍的基本概念,以及AI绘画工具Midjourney、Stable Diffusion的使用方法,还有AI绘画插件和模板的使用为我们接下来的实战设计学习做铺垫。

-----------
AI绘画定义与概述 AI绘画的应用领域 AI绘画与传统绘画的区别 AI绘画的工具分类介绍 AI绘画工具-Midjourney AI绘画工具-百度文心一格 AI绘画工具-SDWebUI AI绘画工具-Vega AI AI绘画工具-微信中的AI绘画小程序 Midjourney学习-Discord账号的注册 Midjourney Bot界面讲解 Midjourney提示词入门 Midjourney高级提示词 Midjourney版本参数学解读 Midjourney功能参数 Midjourney上采样参数 AI绘画组合应用1-Midjourney + GPT AI绘画组合应用2-Stable Diffusion + GPT AI绘画组合应用3-AI绘画+ GPT +小红书 AI绘画组合应用4-AI绘画+ GPT +抖音 AI绘画组合应用5-AI绘画+ GPT +公众号 AI绘画组合应用6-AI绘画+ GPT + AI视频 AI绘画组合应用7-AI绘画+ GPT + 小说人物/场景 AI绘画设计-Logo设计 AI绘画设计-套用万能公式 AI绘画设计-引用艺术风格 AI绘画设计-GPT加速设计方案落地 AI绘画设计-Vega AI渲染线稿生成设计 AI绘画设计-摄影 AI绘画设计-头像设计 AI绘画设计-海报设计 AI绘画设计-模特换装 AI绘画设计-家具设计 AI绘画设计-潘顿椅设计 AI绘画设计-沙发设计 AI绘画设计-电视柜设计 AI绘画设计-包装设计的提示词构思

第三阶段(30天):AI-视频高段位

恭喜你,如果学到这里,你基本可以找到一份AIGC副业相关的工作,比如电商运营、原画设计、美工、安全分析等岗位;如果新媒体运营学的好,还可以从各大自媒体平台收获平台兼职收益。

到此为止,大概2个月的时间。你已经成为了一名“AI小子”。那么你还想往下探索吗?

-----------
AI视频定义与概述 AI视频制作-方案与创新 AI视频制作-各种工具实操 AI视频制作-美学风格(油画/插画/日漫/水墨) AI视频制作-形象设定(人物形象服装/造型/表情) AI视频画面特效处理 AI视频画面拼接 AI视频画面配音 AI视频画面包装 AI视频锁定人物逐一精修 多种表情动作/情节 动态模型转换-视频内部元素关键帧 动态模型转换-图像整体运动 动态模型转换-虚拟人 动态模型转换-表面特效 AI自媒体视频-深问GPT,获取方案 AI自媒体视频-风格设置(诗歌/文言文等) AI自媒体视频-各行业创意视频设计思路 AI视频风格转换 AI视频字数压缩 AI视频同类型衍生 AI视频Pormpt公式

第四阶段(20天):AI-虚拟数字人课程

-----------
AI数字人工具简介 AI工作台界面功能展示及介绍 AI数字人任务确定 AI数字人素材准备 AI知识、语料的投喂 AI模型训练 AI训练成果展示及改进 AI数字人直播系统工具使用 AI人物在各平台直播 AI数字人在OBS平台直播

第五阶段(45天以上):AIGC-多渠道变现课程

该阶段是项目演练阶段,大家通过使用之前学习过的AIGC基础知识,项目中分别应用到了新媒体、电子商务等岗位能帮助大家在主流的新媒体和电商平台引流和带货变现。

-----------

AI-小红书引流变现 AI-公众号引流变现 AI-知乎引流变现 AI-抖音引流/带货变现 AI-写作变现 AI-B站引流变现 AI-快手引流变现 AI-百家号引流变现 AI-制作素材模板出售变现 AI-周边定制变现 AI-手机壳图案定制变现 AI-周边产品定制变现 AI-服装图案定制变现 AI-个性头像定制变现 AI-起号与知识付费变现 AI-实现淘宝销售变现

学习是一个过程,只要学习就会有挑战。天道酬勤,你越努力,就会成为越优秀的自己。

如果你能在15天内完成所有的任务,那你堪称天才。然而,如果你能完成 60-70% 的内容,你就已经开始具备成为一名AIGC的正确特征了。

这份完整版的AIGC资料我已经打包好,需要的点击下方二维码,即可前往免费领取!

总结

**文章总结**:
在大模型驱动的AIGC时代,由明星AI公司Stability AI推出的Stable Diffusion模型引领潮流,尤其是最新发布的Stable Diffusion XL(SDXL)1.0版本,标志着文本到图像生成技术的重大进步。SDXL 1.0作为最先进的开源图像模型,具备以下显著进化:
1. **生成能力的飞跃**:SDXL 1.0能够生成任何艺术风格的高质量图像,逼真且风格自由。它在色彩、对比度、光线和阴影处理上表现优异,并支持原生1024x1024分辨率,还能渲染复杂概念如手、文本及空间排列。
2. **智能化的语言输入**:模型语言简洁智能,用户仅需简短描述即可生成复杂精细化图像,且对语境理解更为精准,能区分类似词汇的不同意义(如“红场”与“红色正方形”)。
3. **强大的微调与控制功能**:SDXL 1.0支持基于自定义数据的便捷微调,可生成LoRA或检查点,减少数据处理需求。新引入的T2I/ControlNet技术将进一步增强任务特定结构和样式的控制力,目前处于测试预览阶段。
用户可通过多种渠道体验SDXL 1.0,包括Clipdrop、DreamStudio应用程序、Stability AI Platform和GitHub仓库。此外,亚马逊云科技的Amazon Bedrock和SageMaker JumpStart也将支持SDXL 1.0。
AIGC技术的广泛应用前景亦被看好,它有望提升内容生产自动化程度,在游戏、影视等领域创造更丰富的沉浸式体验,辅助设计师和创意工作者的创意工作。
针对AIGC初学者,文章还提供了详细的学习计划,涵盖GPT从入门到高级应用、AI绘画进阶、AI视频制作及虚拟数字人等多个阶段,旨在帮助学习者掌握AIGC技术的核心能力与实际应用,最终实现多渠道变现。

更新时间 2024-09-09