输入“/”快速插入内容

第十五期 生图新王FLUX.1

2024年9月18日修改
FLUX.1 介绍
什么是FLUX.1?
FLUX.1 是由 Black Forest Labs(黑森林实验室,官网:https://blackforestlabs.ai/) 开发的一个先进的开源文本到图像生成模型。
Black Forest Labs 是一个由Stability AI的前核心成员Robin Rombach创立的新兴团队,虽然对许多人而言还颇为陌生,但其成员多数来自Stable Diffusion的原班人马,因此拥有强大的生成模型研发实力。
该实验室已经成功筹集到3200万美元的资金,致力于开发尖端的生成式深度学习模型,用于图像和视频等多媒体领域,并力图树立新的行业标杆。FLUX.1模型套件的推出,标志着他们朝着这一宏伟目标迈出了坚实的第一步。
模型版本介绍
FLUX.1模型套件由三个不同版本的模型组成,各有其特点和应用场景:
FLUX.1 [pro]:闭源模型
代表着最高端的性能标准。它拥有顶尖的提示词识别能力、卓越的视觉质量和图像细节处理能力,以及丰富的输出多样性。用户可以通过注册官方API来获取访问权限,并且该模型还提供定制化服务以满足企业需求。
FLUX.1 [dev]:开源不可商用
作为开源模型,它虽然不能用于商业用途,但继承了[pro]版本的优秀图像质量和提示词处理能力,同时在效率上进行了优化,使其更加高效。
FLUX.1 [schnell]:开源可商用
同样是开源模型,但与[dev]不同,它允许商业使用。专为本地开发和个人用户设计,它在生成速度上具有明显优势,同时对内存的占用也是最小的。
FLUX.1模型的训练参数达到了120亿,这一数字远远超过了SD3 Medium的20亿参数。
根据官方资料,无论是FLUX.1 [pro]还是[dev],在图像质量、提示词的准确跟随、尺寸适应性、排版以及输出的多样性方面,都已经超越了市场上的Midjourney v6.0、DALL·E 3 (HD)和SD3-Ultra等流行模型,确立了图像合成技术的新高度。
模型下载
主模型下载
在dev或者schnell的huggingface地址中下载模型。
下载后放在comfyui\models\unet文件夹中。
VAE下载地址
下载后,放在comfyui\models\vae文件夹中.
CLIP下载地址
官方提供了clip_l.safetensors,还有t5xxl的FP8和FP16的两种精度的clip模型供选择,大家根据电脑配置任选FP8或者FP16精度下载就可以,经过经验FP8效果并不差,足够用。
下载后,放在comfyui\models\clip文件夹中.
低显存方案(8G以下)
ComfyUI BitsandBytes_NF4 Flux模型解决显卡显存是6-8G的,FLUX的运行,使用
下载慢的可以从网盘里下(上面百度网盘里也有).
模型与工作流地址
工作流