这篇 FLUX 3 Image Klein 评测,重点看它在文字渲染和图像编辑上的公开实测表现,并给出一套可重复运行的多参考图一致性与布局控制测试方法。
结论先说:控制更快了,但保真仍不够稳定
FLUX 3 Image Klein 是 Black Forest Labs 于 2026 年 10 月 15 日发布的一款 5.6B 图像 Transformer 模型。官方版本支持文生图、图像编辑、最多 10 张参考图、原生 4K 输出和边界框控制;同时提供适合快速生成的 16 步蒸馏 checkpoint,以及可用于微调的 50 步基础 checkpoint。(Black Forest Labs)
目前最有价值的证据并不是厂商内部排名,而是一项可复现的文字渲染测试,加上一项可量化的编辑测试:一位实测者报告称,模型能正确生成海报文字,但在简单替换物体后,整张图只有 37.6% 的像素仍处于原图亮度上下 8 个等级的范围内。(Creative AI News)
FLUX 3 Image Klein 适合制作海报、缩略图、概念画面和快速草稿。但如果背景、Logo、面部或产品表面必须保持不变,它就不是一个稳妥的默认选择。
测试方法:四个可以重复运行的提示词
下面这套测试,旨在把发布会演示中经常混在一起的能力拆开验证。建议先使用蒸馏 checkpoint,固定随机种子,输出 1024 x 1024 图像,运行 16 步。文字渲染测试时关闭 prompt upsampling,确保提示词本身处于可控状态。公开的 Diffusers 示例使用固定种子 0,而官方快速配置使用 16 步。(Hugging Face Diffusers guide)
- 文字渲染:生成一张包含两段精确文字的海报:一段主标题,以及一段日期/场地信息。只有在每个字符都正确、层级清晰,且文字位于指定区域内时,才算通过。
- 多参考图一致性:分别提供一个人物和一个物体的参考图,要求模型把它们放进新的场景,并在提示词中明确指定
<ref_image_0>和<ref_image_1>。连续使用三个随机种子,分别检查身份、物体形状、数量以及是否出现不必要的替换。 - 布局控制:按照
[y_min, x_min, y_max, x_max]的顺序,在 0-1000 的尺度上添加归一化边界框。重点观察元素是否落在目标区域内,而不要把边界框当作硬遮罩。 - 图像编辑:先生成一张带有可读文字和纹理背景的图像,再要求模型替换其中一个物体,同时明确保留文字和背景。比较编辑前后目标区域之外的差异,不要只凭肉眼判断。
这套方法之所以重要,是因为官方文档明确表示,参考图用于锚定内容,但不会锁定图像结构;模型卡也提醒,边界框只用于引导大致位置,并不是像素级遮罩。(Hugging Face model documentation)
文字渲染:目前最明确的成功案例
目前最清晰的一项公开测试,是一张 1024 x 1024 的演唱会海报:画面采用米白色纸张,配有橙色霓虹萨克斯风,并要求准确生成 “NIGHT SHIFT” 和 “OCT 24 RIVERSIDE HALL” 两段文字。使用蒸馏模型且关闭 prompt upsampling 后,实测者表示所有文字都拼写正确,也出现在预期位置。包括排队时间在内,完整的托管运行耗时为 16.6 秒。(Creative AI News)
开启 upsampling 后,同一提示词仍然正确生成了文字,但耗时增加到 27.1 秒,萨克斯风的按键却变成了纠缠在一起的霓虹形状。这说明了一个实用边界:扩写一段简短而精确的美术指导提示词,可能带来更多描述性细节,却也可能牺牲物体的简洁性。
做文字渲染测试时,我会先从原始提示词开始,而不是直接启用 upsampler:
A square concert poster on cream paper. Place the exact headline "NIGHT SHIFT" in large clean uppercase letters across the top. Place the exact line "OCT 24 RIVERSIDE HALL" in smaller uppercase letters along the bottom. Put one simple orange neon saxophone in the center. Keep the typography flat, legible, correctly spelled, and separate from the saxophone.
在判断测试是否通过前,先以 100% 比例检查原始输出。拼写正确还不够:如果字母与主体重叠、大小写发生变化,或者在目标输出尺寸下失去层级,同样不能算成功。
多参考图一致性:功能确实存在,但上限尚未验证
FLUX 3 Image Klein 官方支持最多 10 张参考图。在 Diffusers 工作流中,参考图以列表形式传入,并在提示词中通过 <ref_image_0>、<ref_image_1> 等标记进行调用。官方示例将一张红狐狸参考图和一张木制长椅参考图组合进雪景中。(Hugging Face Diffusers guide)
文档写明支持 10 张参考图,并不等于模型能稳定保留 10 张图中的身份特征。因此,应该分别给每张参考图评分:
Create one editorial photograph in a snowy park. Use <ref_image_0> for the person's face, hair, and identity. Use <ref_image_1> for the red backpack's shape and color. Keep one person and one backpack only. Place the person seated on the bench, facing three-quarters toward camera. Do not merge, duplicate, recolor, or redesign either reference subject.
用三个随机种子运行这段提示词,分别评估面部身份、背包形状、数量和姿态。画面是否好看,不能单独证明一致性。
早期用户讨论也说明了为什么需要保持谨慎。Reddit 上的测试者多次将 Klein 与 Krea 2、Qwen Image 2.1 以及 FLUX.2 Klein 对比,讨论中有人提到解剖结构和伪影问题,但这些仍属于首日反馈,并不是受控的多参考图基准测试。一位用户写道:“Flux 2 klein 4B was legit better than this”,另一位用户则表示,蒸馏版速度很快,但变形更多。(r/StableDiffusion discussion)
布局控制:更适合规划构图,而不是充当遮罩
相比一句“把人物放在左边”的自然语言要求,这套布局接口更加具体。每个区域都包含 ID、归一化边界框和描述文字。坐标顺序是 [y_min, x_min, y_max, x_max],不是更常见的先写 x 坐标的格式。坐标范围为 0 到 1000,因此同一套布局可以复用于不同输出尺寸。(Hugging Face Diffusers guide)
一个简单的布局提示词可以这样写:
A clean product launch graphic. <background_1> is a solid pale blue background. <product_1> is a black wireless speaker centered in the lower half. <headline_1> is the exact text "SOUND WITHOUT CABLES" in bold black uppercase letters across the upper third.
[
{"id":"background_1","bbox":[0,0,1000,1000],"desc":"solid pale blue background"},
{"id":"product_1","bbox":[430,250,900,750],"desc":"one black wireless speaker"},
{"id":"headline_1","bbox":[80,80,260,920],"desc":"exact headline text SOUND WITHOUT CABLES"}
]
建议把两个指标分开记录:主体质心的位置,以及是否遵守边界。一个产品可能确实落在画面右半边,却仍然越过标题区域。文档所描述的功能支持大致位置和区域描述;不要把它当成能保证未选中像素不变的修复遮罩。
对于已有图像的编辑,文档格式还会加入 from、src_bbox 和 tgt_bbox。源区域和目标区域相同,表示让区域保持原位;两者不同,则表示移动区域。官方示例在保留其他毛线元素不变的同时移动了一名针织骑士;在 H100 上处理一对 1360 x 768 的参考图和输出图时,公开的布局编辑流程耗时 4.10 秒。(Hugging Face Diffusers guide)
编辑质量:最大问题是牵连式变化
目前最有参考价值的一项编辑实测,基于前面的海报展开:要求 Klein 将萨克斯风替换成小号,同时保留文字和纸张。最终结果变成了萨克斯风与小号的混合体。主标题和场地信息仍然清晰可读,但纸张纹理被重新生成,并没有保持原样。(Creative AI News)
通过像素对比,这个问题可以被量化:
| 区域 | 亮度差在 8 个等级以内的像素 |
|---|---|
| 整张图 | 37.6% |
| 纯纸张区域 | 19.4% |
| 标题带 | 75.4% |
纸张区域在亮度差 24 个等级以内的像素比例达到 99.7%,说明编辑并没有彻底改变背景的整体色调。但细节纹理的变化已经足够明显,因此不能再把“保留背景”理解成像素级保留。
如果要进行更严格的测试,提示词应该描述完整的最终画面,而不只是告诉模型要做什么局部修改:
Edit the supplied poster. Keep the cream paper texture, the exact headline "NIGHT SHIFT", and the exact line "OCT 24 RIVERSIDE HALL" unchanged in spelling, position, size, and style. Replace only the central orange neon saxophone with one simple orange neon trumpet. Keep the same scale, center position, lighting, shadow, poster margins, and typography. Do not add instruments, change the paper, or alter any text.
这种写法可能有助于提升语义遵循度,但不会把本地 checkpoint 变成像素级编辑器。如果能够接受纹理漂移,可以使用本地 Klein;正式交付前仍应检查结果,必要时进行后期处理。
运行速度、版本与成本
| 项目 | FLUX 3 Image Klein 详情 |
|---|---|
| 蒸馏 checkpoint | 16 步;用于快速生成和编辑 |
| 基础 checkpoint | 50 步;用于微调和 LoRA 工作流 |
| 图像 Transformer | 5.6B 参数 |
| 生成器权重 | 11.2 GB BF16;5.6 GB FP8,据 BFL 数据 |
| 最低显存说法 | 据 BFL 数据,INT8 优化路径可在最低 8 GB 显存的 NVIDIA RTX 硬件上运行 |
| API 起始价格 | 1K 档位每张图 $0.009,据 BFL 数据 |
| 许可证 | FLUX Kommunity License;商业输出权取决于资格和相关条件 |
8 GB 是针对优化量化路径的兼容性说明,并不意味着能以 4K 速度运行。独立分析指出,文本编码器、VAE、可选的 upsampler 以及运行时开销,都不包含在 5.6B 这个核心数字之内。(ALFW analysis)
BFL 的质量结论同样需要加上这个前提。公司称,相比 FLUX.2 Klein 9B,文生图内部排名提升了 +91 Elo,编辑提升了 +70 Elo,但发布文章没有提供足够的方法细节,外部无法据此复现该排名。(Black Forest Labs)
现在适合谁使用 FLUX 3 Image Klein?
| 需求 | 建议 |
|---|---|
| 海报、缩略图、社交媒体配图 | 使用 Klein 蒸馏版;交付前以 100% 比例检查文字 |
| 将多个参考图组合进一个新构图 | 可以尝试 Klein,但要运行三个随机种子,并分别评估每张参考图 |
| 有明确规划的产品或编辑排版 | 把边界框当作构图指导,然后手动检查边界 |
| 本地私有生成 | 如果量化工作流适配你的 GPU,Klein 很有吸引力 |
| 微调或 LoRA 训练 | 从基础 checkpoint 开始,而不是蒸馏版 Klein |
| 像素稳定的物体替换 | 不要把本地 Klein 作为唯一的生产级编辑器 |
| 商业输出 | 先完整确认 FLUX Kommunity License 及关联收入门槛 |
这个模型值得测试,因为它在一个相对紧凑的方案中同时提供了速度、开放权重、参考图支持和明确的布局控制。但现有证据仍不足以证明它具备“像素级完美编辑”能力:目前最有力的编辑测试显示,文字可以保持清晰,但背景漂移相当明显。
FLUX 3 Image Klein 常见问题
FLUX 3 Image Klein 能生成原生 4K 图像吗?
Black Forest Labs 宣称支持原生 4K 生成。目前公开的实测证据更多集中在 1024 x 1024,而不是 4K,因此请针对你实际要交付的分辨率和硬件进行测试。(Black Forest Labs)
生成内容可以用于商业用途吗?
FLUX Kommunity License 规定了符合条件的商业输出使用要求,其中包括收入门槛,以及审核或过滤要求。它并不是不受限制的 Apache 风格许可证;在进行商业微调、分发或嵌入前,请先阅读完整许可证。