当前位置:AIGC资讯 > AIGC > 正文

AI终于会画手了!AI绘画最强开源工具FLUX测试与安装

大家好,我是SD教程菌

此前发布的Stable Diffusion 3模型,因为过度审核,导致人体结构的生成能力“退步”,被喷得不轻。

现在一款优秀的平替出现了,那就是黑森林实验室的FLUX模型,该团队由Stability AI前核心成员组成。FLUX一经推出,好评如潮,被封为“最强开源文生图模型”。

先来感受一下FLUX的出图效果:

特朗普和一个女性机器人跳舞,机器人全身金属材质,模特身材,周围有许多人在围观
Trump dances with a female robot, the robot is made of metal and has a model figure, surrounded by many people watching

1920年的黑白照片:20多岁的女性历史学家站在一个满是古代文物的储藏室里,手里拿着一本书,她带着困惑的神情进行研究
Black and white photo from 1920: A female historian in her twenties stands in a storage room filled with ancient artifacts, holding a book and conducting research with a puzzled expression

海怪张着嘴游向镜头,正要吞下一个也面对镜头的潜水员
Kraken swimming towards camera with mouth open, about to swallow a scuba diver who is also facing the camera

聚焦森林中的木制舞台,以cinema4d风格呈现,舞台背景充满活力,平衡优雅,生态优美,色调优美
Focus on wooden stage in forest, rendered in cinema4d style, vibrant stage background, elegant balance, ecology, tones

Facebook帖子风格的高细节写实照片,航拍中国一座绿草山的俯视图,上面雕刻着形状像头骨的巨大龙骨。这是一张非常奇怪但美丽的恐龙骨骼风格的写实照片。
high-detail realistic photograph in the style of a Facebook post, Aerial photography of the top view of a green grassy mountain in China carved with huge dragon bones shaped like a skull. It is a very strange but beautiful realistic photo in the style of dinosaur bones.

关于金合欢树的信息图细节,包括根系、古董环境笔记、素描、科学论文、咖啡渍。
Infographic details on a wattle (acacia) tree including root system, antique environmental notes, sketch, scientific paper, coffee stains.

漫画书页面,插图为身穿白色长袍的幻想精灵公主在夜晚穿过鲜花和藤蔓的神奇森林,地平线上的植物山,以Moebius的风格高度详细,4k
Comic book page with panels featuring fantasy elven princess in white robes walking through magical forest with flowers and vines at night, mountains of plants on the horizon, highly detailed in the style of Moebius, 4k

以上是各种风格图片的测试,主要考察对提示词的遵从性,相比头部闭源工具诸如Midjourney、DALLE,FLUX的表现依然可圈可点。

目前FLUX已支持ComfyUI图形用户界面,接下来介绍本地部署的方法:

第一步:安装ComfyUI的最新版本

1、进入下面网址:https://github.com/comfyanonymous/ComfyUI?tab=readme-ov-file#installing

2、点击Direct link to download下载大约1.5G的压缩包。(不想下载也可以扫描文末二维码免费获取)

3、将压缩包解压到你指定的硬盘。

4、进入安装好的目录,运行run_nvidia_gpu.bat,接下来系统会自动下载必需的文件。

5、之后会自动弹出类似这样的网页,说明安装成功。

注意:这个后台窗口要保持开启,否则ComfyUI无法正常使用。

第二步:下载FLUX模型

模型我已经打包好了,需要的小伙伴可以看文末扫描免费获取哦

1、进入FLUX的抱抱脸页面:

https://huggingface.co/black-forest-labs/FLUX.1-dev/tree/main

点击Files按钮:

2、在文件列表中,下载主模型文件和VAE自编码器:
flux1-dev.sft:23.8 GB,将此文件放入ComfyUI/models/unet/ 目录下
ae.safetensors:335 MB,将此文件放入ComfyUI/models/vae/ 目录下

3、进入ComfyUI抱抱脸页面:https://huggingface.co/comfyanonymous/flux_text_encoders/tree/main

4、在文件列表中,下载CLIP预训练模型:
t5xxl_fp16.safetensors: 9.79 GB
t5xxl_fp8_e4m3fn.safetensors: 4.89 GB
clip_l.safetensors: 246 MB
以上文件均放入ComfyUI/models/clip/ 目录下,其中9GB和4GB的文件至少下载其中一个。

5、进入以下网址:https://openart.ai/workflows/maitruclam/comfyui-workflow-for-flux-simple/iuRdGnfzmTbOOzONIiVV,点击右边Download按钮下载工作流。

6、将工作流文件拖到ComfyUI页面上,得到下图的结果:

7、确保你选择了正确的模型和编码器(参考下图),然后就可以开始绘画了!

需要注意的是,FLUX对硬件要求较高。测试过程中,最高占用了近30G内存:

FLUX生图速度也较慢,即使用4090显卡,默认设置,生成一张1024x1024的图像,也要20多秒:

但考虑到一次性成功的几率提高了,速度慢似乎也可以接受?

感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。

AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。

二、AIGC必备工具

工具都帮大家整理好了,安装就可直接上手!

三、最新AIGC学习笔记

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。

四、AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

五、实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。

若有侵权,请联系删除

总结

### SD教程菌推荐黑森林FLUX模型,引领开源文生图新时代
在Stable Diffusion 3因过度审核导致人体生成能力下滑的背景下,黑森林实验室推出的FLUX模型横空出世,迅速赢得广泛好评,被誉为“最强开源文生图模型”。这款由Stability AI前核心成员打造的FLUX模型,在图片生成的效果和创意上展现了惊人的实力。
**FLUX模型优异表现**:
通过一系列测试图片展示,FLUX模型在不同风格下的生成效果令人印象深刻。从特朗普与金属女机器人的共舞,到1920年风格的历史学者研究照,再到恐怖的海怪张口吞人景象,FLUX均在准确度、细节丰富度和创意性方面表现出色。特别在遵从提示词生成图片的能力上,相较其他闭源工具(如Midjourney、DALLE),FLUX模型可谓可圈可点。
**本地部署教程**:
为了让更多用户能亲身体验FLUX的魅力,文章详细介绍了如何在本地部署FLUX模型。首先,用户需安装ComfyUI图形用户界面;接着,从指定网址下载并配置FLUX的主模型、VAE自编码器和CLIP预训练模型。整个过程虽然稍显繁琐,但详尽的步骤指导和资源链接,让即便是新手也能轻松上手。
**硬件与性能考量**:
值得注意的是,FLUX模型对硬件要求较高,测试中占用近30G内存,且生成速度较慢,使用4090显卡生成1024x1024图像仍需20多秒。然而,相对于其高成功率和出众效果,这些牺牲似乎是值得的。
**AIGC技术与未来展望**:
文章进一步探讨了AIGC技术的广阔发展前景,指出随着人工智能技术的不断进步,AIGC将在游戏和计算领域得到更广泛应用,使系统更高效、智能、灵活。同时,AIGC与AI技术的深度融合,将在多个领域产生深远影响,为程序员和开发者带来新的机遇和挑战。
**学习资源分享**:
最后,作者还贴心地为对AIGC技术感兴趣的学习者提供了全套学习资源,包括完整的学习路线、必备工具、学习笔记、视频教程合集以及实战案例,旨在帮助学习者快速入门并不断提升技能水平。
综上所述,黑森林实验室的FLUX模型以其卓越的表现力和开源友好的特性,为AI图像生成领域带来了新的活力与可能。无论是对技术的探索者还是对创意实践的爱好者,FLUX都是一个不容错过的选择。

更新时间 2024-09-11