你在选生图模型时大概率遇到过这种情况:看了几篇横评,结论互相打架,换到自己手里出图还是不对味。问题不在你,在于多数对比没对齐提示词、参数和用途。这篇不评谁强谁弱,只给一套能自己跑的小规模对比方法:什么情况下值得比、比哪几项、比完怎么下结论,以及什么情况下根本不用比直接选。
先判断:你这活儿到底值不值得做对比
先别急着开表格。图像模型对比这件事,成本不在跑那几轮,而在你后面要持续维护一套判断标准。所以第一步不是选模型,是判断你这活儿要不要那套标准。判断只看一件事:你对「可复现」的需求有多强。同一个提示词,今天出一版、下周再出一版,差别大不大,这件事对你算不算事故。
| 你的情况 | 可复现需求 | 建议 |
|---|---|---|
| 长期批量出图,交付给客户或上线 | 高,出图不稳定就是返工 | 认真比,值得投入 |
| 风格一致性有硬要求,系列图要像一套 | 高,风格漂了就废 | 认真比,值得投入 |
| 控图是核心工序,构图姿势局部重绘都要卡 | 高,控不住等于没做 | 认真比,值得投入 |
| 一次性出几张插图,用完就完 | 低 | 直接挑上手快的 |
| 风格随时换,今天这个明天那个 | 低 | 不用比,跟着感觉走 |
| 只要好看就行,没人在意是不是同一套 | 低 | 别比,挑个顺手的 |
这三类情况要分开看:要长期批量出图、对风格一致性有硬要求、控图是核心工序。三者只要占一条,对比就有回报,因为你后面每一次出图都在吃这个判断的红利。三条都不占,基本属于一次性消费,比一轮花掉的时间够你直接把图出完了。
- 问自己:这个任务下个月还会再做吗?会,就倾向认真比
- 问自己:两张图风格不一致,客户或同事会不会挑出来?会,就倾向认真比
- 问自己:我需要固定构图、固定姿势、或者只重画一小块吗?需要,就倾向认真比
- 以上都答不上来,说明你现在的需求是「先出图」,不是「选工具」
判断完值不值得,再决定怎么比。真要进对比环节,别靠感觉记,把每次出图的提示词、参数、结果留档,过一两周回头看差别。具体该记录哪些字段、怎么看当时的横向数据,可以到 图像模型对比页(/compare/image-model) 按你自己的任务类型筛一遍,再到 出图一致性指南(/guides/image-prompt-consistency) 对一下记录方法。数字和当时的结论都以站内页面为准,别照搬别人几周前的截图。
怎么比:固定变量,小样本,先跑通再铺开
比图像模型最容易踩的坑,是一次换好几个东西:提示词改了、比例改了、步数也改了,最后出图变好或变差,你根本不知道是谁的功劳。想得出能用的结论,就把变量锁死,一次只让模型这一个东西动。
- 固定输入条件把提示词、画面比例、采样步数、随机种子全部写下来,能固定的都固定。种子固定后同一提示词才会稳定复现,否则每次都是新图,没法对比。
- 一次只换模型其他参数原样复制,只把模型换成下一个。中途想调参数就新开一轮,别在对比过程中顺手改,不然差异来源就混了。
- 用真实业务提示词挑 5 到 10 条你平时真的会用的提示词,其中一条放最难的(复杂构图或需要出文字排版),一条放最普通的日常场景。别拿网上那种炫技提示词,它不代表你的活。
- 每轮只记四样可用出图比例、需要重跑几次、单张耗时、控图功能够不够用。这四个直接影响你实际干活,其他花哨指标可以先放一边。
- 表格记录,别靠记忆跑完一轮立刻填进表里,隔两天再回想一定对不上。表里一行的模型对一列指标,谁稳谁快一眼能看出来。
| 记录项 | 怎么填 | 什么情况下这项不重要 |
|---|---|---|
| 可用出图比例 | 这条提示词里能直接用的图占几张 | 只做灵感参考、不批量出图时 |
| 需要重跑次数 | 同一提示词重跑几次才拿到可用图 | 只跑单张、不追求稳定产出时 |
| 单张耗时 | 从提交到出图的实际等待时间 | 离线批量跑、不赶交付时 |
| 控图功能 | 姿势、构图、局部重绘够不够用 | 不需要精确控图的自由创作场景 |
这一轮下来,你手上会有一张自己的小样本对照表,比看任何别人的结论都靠谱。想先横向摸一遍各家出图风格差异,可以到 同一提示词比多家模型出图质量(/tools/pelican-bench) 这类基准页做粗筛,把明显不合适的先排掉,再拿自己的提示词复验一遍。粗筛只能帮你缩小范围,最终判断还得回到你的业务提示词上。
比什么:四个维度,别只盯着画质
很多人做图像模型对比,第一反应是把各家出图摆一排,挑最好看的那张。这个做法只能当热身,不能当结论。真正决定你要不要换模型、要不要付钱的,是下面这四个维度。顺序别乱,第一个最重要。
- 可用率
- 同一提示词连出十张,能不改直接进下一环节的有几张,这个比例比偶尔一张惊艳重要得多
- 控图能力
- 能不能按参考图定风格、能不能只改局部、能不能锁住姿势,这三项直接决定后期返工量
- 文字与细节
- 图里要出中英文字、要精确排布元素时单独测,它跟整体画质不相关
- 成本口径
- 按张算还是按订阅算、失败重试算不算钱,口径不统一就没法横向比
为什么要先看可用率
峰值画质高,不等于能干活。一张图再好看,如果十张里只有一张能用,剩下九张都要手动修或者重抽,那你的时间成本全花在筛图上。判断方法很简单:拿你自己业务里最常见的三个提示词,每个连出十张,数出「不用改就能用」的张数,记成比例。什么情况下这条不适用:你本来就是做创意探索、单张精修交付,那峰值画质确实更值钱。
控图能力要分档看,别打包成一个分数
| 能力项 | 不达标时的后果 | 怎么快速验证 |
|---|---|---|
| 按参考图定风格 | 每次风格都漂,得反复重抽 | 给一张风格参考图,看输出是否稳定贴近 |
| 局部修改 | 改一个元素要整张重画 | 圈一小块让它改,看其余部分是否保持 |
| 姿势/构图锁定 | 人物角度每次不一样,没法做系列图 | 给一张姿势参考,出多张看骨架是否一致 |
这三项不用全都要,按你的工作流排序。做电商主图的,风格稳定和局部改最要紧;做角色系列的,姿势锁定排前面。哪一项你天天用,就先测哪一项,别平均用力。
文字、细节和成本口径别混在一起比
- 单独测文字准备一张需要中英混排的图,看字有没有糊、有没有错、位置对不对;这项跟画质分数基本无关,必须单列
- 统一成本口径把所有候选换算成「出一张可用图的成本」:订阅制的按月费除以当月实际可用张数,按张计的加上失败重试的张数
- 拿数字去核对具体单价和当时的计费方式,到站内「开源图像模型出图怎么落地」和「开源模型比价」两页核对,不要凭记忆
- 记录并复测把上面各项填成一张对照表,过一段时间再按同样提示词复测一次,避免一次性结论
怎么下结论,以及什么时候别下结论
对比跑完,最容易犯的错是把过程数据直接翻译成一句「A 比 B 好」。这句话对你没用,因为它不可复现,别人拿同一个模型也验不出来。换个写法:把结论落成条件句,把成立范围一并写进去。
- 推荐写法
- 在我这类提示词、这个出图量级下,A 的重跑次数更少,废图更少
- 不推荐写法
- A 比 B 好、A 更强、A 完胜
- 为什么
- 条件句自带适用范围,换提示词或换量级时你能立刻判断要不要重做对比
- 怎么验证
- 把同一批提示词分别喂给两个模型,数需要重跑几次才拿到可用图
- 条件句里至少写清三件事:提示词风格、单次出图量级、你判断「能用」的标准
- 结论只覆盖你实际测过的那类任务,风格迁移和写实人像不要互相套用
- 把重跑次数当主要指标,比主观打分更容易复现
- 结论旁边留一行备注:换模型后就地重测,不要沿用
- 不写「长期有效」,只写「在我这两周的样本里成立」
- 定试用窗口选定后先小批量跑两周左右,量级控制在日常出图的一小部分,别一上来就全量迁移
- 留原始记录把提示词、参数、每批出图数和重跑次数记在同一张表里,别靠记忆
- 设退出条件提前写下「连续几批仍然跑不出稳定结果」就换回原来的模型,写下来才不容易硬磕
- 到期复核窗口结束后回看记录,稳定就扩量,不稳定就换,别因为已经投入了就继续
| 情况 | 要不要做对比 | 怎么处理 |
|---|---|---|
| 长期产出、要求风格一致 | 值得 | 按条件句结论 + 小批量试用窗口走 |
| 纯个人玩玩、出图只给自己看 | 不值得 | 直接选顺手的一个,把时间留给调提示词 |
| 作品集不要求跨图一致性 | 不值得 | 跳过横向对比,单模型多试几版足够 |
| 业务要把出图接进流水线 | 值得 | 除重跑次数外,再记可用率和人工返工量 |
还有一种情况要主动收手:模型迭代快的时候。你这轮对比的结论,可能过几周就因为底模更新而失效,拿旧横评当现在的准,比不做对比还危险。真要长期追踪,别存一份死结论,改成定期去看当时的可用清单——到 /multimodal 多模态模型 看模型侧的变化,到 /sites 中转站目录 看渠道侧还能用哪些,两边对一遍再决定要不要重测。
常见问题
网上现成的图像模型横评,能直接照着选吗?
可以当粗筛,不能当结论。那些横评的提示词、参数、评判人偏好跟你都不一样,尤其画质这种主观项,换个题材排序就变。合理用法是先看它们筛出两三个候选,再拿你自己业务里的提示词跑一轮小对比,用自己的可用率做最终判断。
我只想快速出一批图,还有必要做对比吗?
基本不用。对比的价值出现在你要长期、批量、要求风格一致的时候。一次性出一批插图,选个界面顺手、上手快的就行,把时间花在调提示词上收益更大。等这活儿变成固定工序、开始返工了,再回来做对比也不迟。
对比的时候,怎么避免被自己的偏好带偏?
把评判标准提前写下来,比如「构图正确」「无需重跑」「文字没错」这几条,出图后按条打分,别凭第一眼好看不好看决定。另外把提示词和参数原样存好,隔几天换一批新提示词再验一次,两轮结论一致才认。首轮感觉和复验差很多的,说明是随机性,不是模型差异。