最近,由前 Stability AI员工创立的黑森林实验室推出了开源图像生成模型Flux.1,可谓名声大噪,爆火全网。刚才已经上手使用,效果确实让我大吃一惊,真的很强!!!
Flux.1 是一款免费开源的模型,性能可与Midjourney V6媲美。用户可通过Comfyui调用Flux.1。本文我将详细介绍其使用流程,即使你是新手小白,只要紧跟我的步骤,相信你也能使用上这款非常强悍的文生图模型。
Flux 模型总共有3个,分别是:Flux Pro、Flux Dev、Flux Schnell,下面是其性能的对照图
- [pro] 是最顶级的模型,但是只能通过 API 调用;
- [dev] 是由[pro]提炼,开源但非商用,质量和效果与[pro]类似;
- [schnell] 是经过蒸馏的 4 步模型,速度比 [dev] 快 10 倍,Apache 2 开源许可。
目前 ComfyUI 已支持此模型,更新到最新版即可使用。
1.下载 Flux 模型:FLUX 模型有四个可选,FLUX.1 [dev] 、FLUX.1 [dev] fp8、FLUX.1 [schnell]、FLUX.1 [schnell] fp8;
- ① FLUX.1 [dev] :官方版本满配版,最低显存要求24G;下载地址:【点击下载】
- ② FLUX.1 [dev] fp8:优化 [dev] 后版本,建议选择此版本,最低 12G 显存可跑;【点击下载】
- ③ FLUX.1 [schnell]:4 步蒸馏模型,大多数显卡可跑。【点击下载】
- ④ FLUX.1 [schnell] fp8:优化 版本,适应更低的显卡配置。【点击下载】
- ① 和②放在:ComfyUI/models/unet/ 目录下 ③ 和④放在 ComfyUI/models/checkpoints/ 目录下
2.下载 CLIP 模型:
此模型和 SD3 使用的是一样的,如果文件夹中已有,可以不用下载
需下载 t5xxl_fp16.safetensors 或 t5xxl_fp8_e4m3fn.safetensors (建议选择fp8 版本,如果你显存超过 32G 可选择 fp16 版本)还有 clip_l.safetensors 到 ComfyUI/models/clip/ 目录中: 【点击前往】
3下载 VAE 模型:【点击下载】存放至 ComfyUI/models/vae/ 目录,
4开始体验Flux模型工作流
官网已经给了标准版直接下载图片然后往comfyui里面拖即可使用。
相关链接
获取FLUX.1 Pro版本api:https://docs.bfl.ml/
flux_schnell_example 示例获取:https://comfyanonymous.github.io/ComfyUI_examples/flux/
评价
在多个方面,此模型表现出对提示词的遵循性、文本内容的准确性以及尺寸/纵横比方面的优越性,确实在这些领域超越了Midjourney。然而,就美学程度和风格多样性(特别是画家风格)而言,它还未能达到Midjourney的水平。尽管如此,由于其开源性,这一模型已经能够与Midjourney并驾齐驱,甚至在某些方面有所超越。
尽管模型是开源的,但它并不支持免费商用,这限制了一些开发者对Lora、CN等特定模型进行微调和训练的可能性。此外,该模型对显存的要求极高,不是每个人都配备了高端的4090显卡,这使得其运行速度较慢,影响了用户体验。
评论(0)