当前位置:AIGC资讯 > AIGC > 正文

FLUX.1 最强AI绘画开源模型,最新本地部署教程

Stable Diffusion 作者之一 Robin Rombach 官宣创业,成立了新公司「Black Forest Labs」(黑森林实验室),并推出了最新文生图模型「FLUX.1」。Black Forest Labs 在 AI 开发方面拥有丰富的经验,包括 VQGAN 和 Latent Diffusion 模型等开创性成果。该团队的经验涵盖学术、工业和开源环境,使其能够以独特的方式应对下一代 AI 技术的挑战。

让我们分析一下 Flux 的特殊之处:

三种模式,三种优势:

Flux Pro 是一款强大的软件,可提供令人难以置信的图像质量,但只能通过 API 提供(想想:通过平台访问,而不是直接下载)。 Flux Dev 是开放的,允许开发人员进行修改和实验,但它不能用于商业用途。 Flux Schnell 是最容易访问的,具有开源许可并可在 Hugging Face 上使用,非常适合个人项目或与 Diffusers 或 Comfy UI 等工具集成。

超乎寻常的性能:Flux 不仅外观漂亮,而​​且速度快如闪电。我们只需不到 2 秒的时间就能生成高质量图像,这对于曾经焦急地等待 AI 得出结果的人来说是一个重大改变。这种速度使其非常适合实时应用,例如用于视频内容创建或直播的图像生成。

本地部署

目前ComfyUI最新版本已经兼容FLux模型了, 只需内核升级到最新即可体验。

所以我们首先把ComfyUI给更新了

如果你用的是官方的comfyUI整合包就点这个更新

如果你用的是秋叶的启动器就按下图示例更新内核

显存太低的人本地估计运行很可能,我本地电脑配置还行,这里体验下schnell版本。

下载大模型:https://huggingface.co/black-forest-labs/FLUX.1-schnell/tree/main

该链接提供了23.8g的大模型和335MB的Vae模型,我们需要把这两个都下载

下载完成后将大模型放在:ComfyUI/models/unet/ 文件夹中。 VAE应该放在您的 ComfyUI/models/vae/ 文件夹中。

如果电脑配置一般的可以下载Flux-fp8精简版,只有11.9GB:https://huggingface.co/Kijai/flux-fp8/blob/main/flux1-dev-fp8.safetensors

Vae还是通用的ae.sft

我们除了大模型和Vae还需要下载Clip模型:https://huggingface.co/comfyanonymous/flux_text_encoders/tree/main

这其实就是SD3的Clip模型,配置好我们选择fp16,配置一般我们选择fp8,clip_l是一定要下载的

下载完我们放在:ComfyUImodelsclip 该文件夹内

以上的大模型,VAE,Clip都安装完成后我们就可以运行我们的工作流了,官网提供了一个简易的comfyUI工作流:https://comfyanonymous.github.io/ComfyUI_examples/flux/

完成必要的配置,然后输入提示并调整设置后,点击“运行”。AI将开始工作,创作您的杰作。您可以直接在笔记本中查看图像,甚至可以将其下载到您的电脑上!

效果图

提示词:”Design a photo-realistic portrait capturing the strength and resilience of a woman with a determined gaze. Place her in an urban alley with gritty textures and dramatic shadows, emphasizing her empowering presence.”

提示词:A futuristic cityscape with holographic billboards advertising the ‘Internet Income System,’ showcasing people using advanced tech devices to earn online income, vibrant and dynamic


​​​​​​欢迎前往我们的公众号,阅读更多资讯​​​​

创作不易,觉得不错的话,点个赞吧!!!


总结

**Stable Diffusion核心成员Robin Rombach创立Black Forest Labs,推出革命性文生图模型FLUX.1**
Stable Diffusion的杰出贡献者Robin Rombach宣布创立新公司Black Forest Labs,并震撼发布其最新力作——FLUX.1文生图模型。Black Forest Labs凭借在AI领域的深厚积累,特别是在VQGAN和Latent Diffusion模型上的开创性成就,正引领下一代AI技术的浪潮。
**FLUX.1:三大模式,各领风骚**
- **Flux Pro**:专为追求极致图像质量的用户设计,通过API接入,享受前所未有的视觉盛宴,但暂不支持直接下载。
- **Flux Dev**:面向开发者开放,鼓励创新与实验,但严格限制商业用途,为技术探索者提供无限可能。
- **Flux Schnell**:最易上手的版本,拥有开源许可,轻松集成至Hugging Face等平台,是个人项目及创意爱好者的理想选择。
**性能卓越,速度惊人**
FLUX.1不仅在图像质量上令人瞩目,其生成速度更是快如闪电,仅需不到2秒即可呈现高质量图像。这一突破性进展,使得FLUX.1在实时应用领域大放异彩,如视频内容创作、直播图像生成等,极大地提升了工作效率与用户体验。
**本地部署指南**
对于渴望亲身体验FLUX.1魅力的用户,文章还贴心提供了本地部署的详细步骤。通过更新ComfyUI至最新版本,并下载FLUX.1大模型、VAE及Clip模型,即可轻松搭建起属于自己的AI创作环境。此外,针对显存有限的用户,还推荐了Flux-fp8精简版,确保每位创作者都能畅享AI创作的乐趣。
**实战案例,见证奇迹**
文章最后展示了FLUX.1在实际应用中的卓越表现,通过输入精妙的提示词,FLUX.1能够迅速生成令人震撼的图像作品。无论是捕捉女性力量与坚韧的写实肖像,还是展现未来城市风貌的科幻场景,FLUX.1都以其非凡的创造力,为观众带来了前所未有的视觉震撼。
**结语**
Robin Rombach及Black Forest Labs的这次创新之举,无疑为AI文生图领域注入了新的活力。FLUX.1的发布,不仅标志着AI技术在图像生成领域的又一次飞跃,更为广大创作者提供了更加便捷、高效的创作工具。让我们共同期待,FLUX.1在未来能够带来更多令人惊叹的创意作品!

更新时间 2024-08-11