AI 决策模型对比:OpenAI、Perplexity、TypeSafe、Cloudflare 并排实测
决策模型读一段文本或一张图,按你事先定义的问题给出概率,不写一句话。9 月底以来能调用的有五个:TypeSafe 的 Jev、Cloudflare 的 Clef 与 Clef-flash、Perplexity 的 Decider、OpenAI 的 GPT-6 Luna Decisions。我们在 2026-10-07 用同样 196 条带标签输入把五个都跑了一遍:细粒度意图上 Clef-flash 最准,没有哪个模型全面胜出。Perplexity 在 10 月把 Decider 换成了 v1.2,价格减半且只读一遍文本,我们 2026-10-25 重新跑了一遍。Microsoft-Decision-1 在 2026-10-10 加入,Liquid AI 的 d1-ultra 与 d1 在 2026-10-16 加入,各有单独的对比页。免费注册即送 50 积分,注册后就能在下面试用。
免费试用七个决策模型
可选 Liquid AI d1-ultra 或 d1、Microsoft-Decision-1、OpenAI Luna Decisions、Perplexity Decider、Jev 或 Clef-flash,改一下示例即可。免费注册送 50 点,无需信用卡,注册后就能运行。
场景
把工单分给对应团队,评估紧急程度,并标记流失风险。
可以随意修改,所选模型会针对这里的内容回答该场景的问题。
任选两个并排运行
同一段输入、同一组问题,同时交给两个模型:Jev、Clef、Clef-flash、Perplexity Decider、OpenAI Luna Decisions、Microsoft-Decision-1,以及 Liquid AI 的 d1-ultra 和 d1。可以看到答案在哪里一致,以及各自花了多少。
场景
按你的用量,每个模型要花多少
token 数来自我们 2026-10-07 至 10-25 的实测调用,不是厂商数字。Liquid AI d1 / d1-ultra 每个问题都会重新读一遍 state,所以问题越多成本涨得越快。
JevTypeSafe · $0.042 / 百万输入
- 直连,每月
- $2.66
- 在 JevStation,每月
- $137.10
- 每次输入 token
- 634
- 每次积分
- 1
Clef-flashCloudflare · $0.09 / 百万输入
- 直连,每月
- $5.53
- 在 JevStation,每月
- $137.10
- 每次输入 token
- 614
- 每次积分
- 1
ClefCloudflare · $0.24 / 百万输入
- 直连,每月
- $14.74
- 在 JevStation,每月
- $270.30
- 每次输入 token
- 614
- 每次积分
- 2
DeciderPerplexity · $0.02 / 百万输入
- 直连,每月
- $0.83最便宜
- 在 JevStation,每月
- $137.10
- 每次输入 token
- 413
- 每次积分
- 1
Luna DecisionsOpenAI · $0.10 / 百万输入
- 直连,每月
- $6.84
- 在 JevStation,每月
- $137.10
- 每次输入 token
- 684
- 每次积分
- 1
Decision-1Microsoft · $0.042 / 百万输入
- 直连,每月
- $1.47
- 在 JevStation,每月
- $137.10
- 每次输入 token
- 350
- 每次积分
- 1
d1-ultraLiquid AI · $0.042 / 百万输入
- 直连,每月
- $3.66
- 在 JevStation,每月
- $270.30
- 每次输入 token
- 872
- 每次积分
- 2
d1Liquid AI · $0.02 / 百万输入
- 直连,每月
- $1.74
- 在 JevStation,每月
- $137.10
- 每次输入 token
- 872
- 每次积分
- 1
按实测调用拟合的 token 模型估算。八个模型的输出 token 都免费。直连价格不含网关手续费;JevStation 一列是扣除注册赠送的 50 积分后,一次性积分包的最便宜组合。
第一次接触这类模型?什么是 System One 模型讲清了它们怎么训练、和语言模型有什么不同、短板在哪里。
五个模型一览
每个数字都标了来源:(厂商) 是卖模型的公司给的,(实测) 是我们 2026-10-07 自己调用测的。Decider 一列是取代了首测 v1 的 v1.2,其实测行来自 2026-10-25。
| Jev | Clef-flash | Clef | Perplexity Decider v1.2 | OpenAI Luna Decisions | |
|---|---|---|---|---|---|
| 厂商 | TypeSafe | Cloudflare | Cloudflare | Perplexity | OpenAI |
| 发布 | 五个里最早 | 2026-10-01 | 2026-10-01 | v1 10-02;v1.2 10-16 | 2026-09-29 预览 |
| 权重 | 闭源 | 开放,Apache 2.0 | 开放,Apache 2.0 | v1 开放;v1.2 未列出 | 闭源 |
| 基座模型 | 未公开 | Qwen3.5-9B | Qwen3.8-27B | 27B;v1 基于 Qwen3.8 (厂商) | GPT-6 Luna |
| 输入标价 | $0.042 / 百万 | $0.09 / 百万 | $0.24 / 百万 | $0.02 / 百万 | $0.10 / 百万(OpenRouter) |
| 输出 token | 免费 | 免费 | 免费 | 免费 | 免费 |
| 上下文 | 约 32k 共享 (厂商);可开启 262k | 65k (厂商) | 65k (厂商) | 262k (厂商) | 1.05M (厂商) |
| 图片 | 需手动开启的预览功能 (厂商),JevStation 未接入 | 支持 | 支持 | 支持 | 支持 |
| state 怎么计费 | 读一次 | 读一次 | 读一次 | 读一次(v1 每个问题一次)(实测) | 读一次 |
| 延迟中位数 | 412 ms (实测) | 594 ms (实测) | 649 ms (实测) | 525 ms (实测) | 486 ms (实测) |
| 直连方式 | 排队 | 自助开通 | 自助开通 | 自助开通 | 有限预览;OpenRouter |
| JevStation 积分 | 1 / 3 | 1 / 3 | 2 / 6 | 1 / 3 | 1 / 3 |
积分为标准 / 大档:state 超过 8,000 字符或问题超过 5 个即为大档。延迟是从同一台机器到 OpenRouter 的往返时间,只能在表内互相比较,不能和厂商数字比。
决策模型不止这五个。我们测试当天,OpenRouter 上输出类型为 "decisions" 的模型有 14 个,还包括 Liquid d1(现已接入 JevStation,见下文)、Upstage Solar Decide、Inception Mercury Decide 和 Together 的实验模型 Tev1。这里只覆盖背后投入最大的五个。
我们测了什么
同样的输入、同样的问题、同一个接口(OpenRouter 的 /api/v1/systemone),五个模型,两轮完整运行结果一致。所有问题都是零样本:每个选项一行说明,没有任何调优。
- Banking77 银行卡意图:Banking77 测试集里 12 个容易混淆的意图,共 96 条消息——卡还没到 vs 问配送时间、卡丢了 vs 卡信息泄露、付款被拒 vs 不认识的扣款。一个 12 选项的 Choice 问题。
- AG News:AG News 测试集 100 篇新闻,每个类别 25 篇。一个 4 选项的 Choice 问题。
- 长 state:把一句"取消订阅"藏在 20,000 字符中性文本的开头、第 6,000 字符、第 12,000 字符或最末尾,外加一个没有这句话的对照组。一个 Noul 问题。
| 模型 | Banking77 银行卡(96) | AG News(100) | 置信度 ≥ 0.9 的覆盖率与其中准确率(Banking77) | 置信度 ≥ 0.99 却答错(共 196) |
|---|---|---|---|---|
| Jev | 86.5% | 91% | 81%,其中 94.9% 正确 | 4 |
| Clef-flash | 97.9% | 92% | 73%,其中 100% 正确 | 0 |
| Clef | 94.8% | 93% | 60%,其中 100% 正确 | 0 |
| Perplexity Decider v1 | 86.5% | 93% | 77%,其中 98.6% 正确 | 1 |
| Decider v1.2 ¹ | 89.6% | 91% | 73%,其中 100% 正确 | 1 |
| OpenAI Luna Decisions | 90.5% | 89% | 69%,其中 98.5% 正确 | 6 |
¹ OpenRouter 下线 v1 后,2026-10-25 用同样的输入跑。
值得注意的几点:
- 最小的 Clef-flash 在细粒度意图上最准。 这与 Cloudflare 自己公布的 Banking77 结果一致——在此之前还没有 Cloudflare 以外的人验证过。
- Clef 系列最谨慎。 它们很少给出 0.99 以上的置信度,给出时从没错过。Luna Decisions 和 Jev 经常给出 1.00 的置信度,错误也集中在这里:Luna 有 6 个、Jev 有 4 个错误发生在 0.99 及以上。打算超过阈值就自动执行的话,阈值要按模型分别用你自己的标注数据来定。
- OpenAI 拒答了一条输入。 一句普通的银行问题 "How do I freeze my account?"(怎么冻结我的账户?)两轮都返回错误 "OpenAI refused to answer"。要把拒答当成一种失败来处理;在 JevStation 上这次调用的积分会退回。
- 五个模型都读完了 20,000 字符的 state。 即使取消请求放在最末尾,五个模型也都找到了。2026-10-04 我们在 Cloudflare Workers AI 上测到 Clef 只读 state 的前约 2,048 token;2026-10-07 无论经 OpenRouter 还是直接复测 Workers AI,它都读完了全部,这个截断已经没有了。
每个任务约 100 条样本,6 个百分点左右以内的差距可能是噪声,只有 Clef-flash 在 Banking77 上的领先明显超出这个范围。这是一份小样本测试,不是排行榜。
成本陷阱:有的模型每个问题都按一次 state 计费
第一版 Decider v1 在 2026-10-07 标价最低(每百万 $0.04),但每个问题都会把整段 state 重新读一遍。8,000 字符的文本,1 个问题 1,392 个输入 token,3 个问题 4,192,5 个问题 6,985。作为对比,同样的文本 5 个问题,Luna Decisions 只用了约 2,000。
取代它的 Decider v1.2 只读一遍 state,每百万 $0.02:同样的 5 问题请求约 1,550 token,2026-10-25 测得每千次 AG News 调用 $0.0035,是我们测过的多问题场景里最便宜的。2026-10-16 加入的 Liquid AI d1 与 d1-ultra 仍按问题计费(同样的 5 问题请求约 6,964 token),JevStation 因此对 d1-ultra 收 2 积分;标价减半的 d1、Decider v1.2 和只读一遍 state 的模型收 1 积分。
所以哪个模型最便宜,取决于请求的形状。用上面的计算器代入你自己的数字。
怎么选
- 固定意图列表、标签彼此相近:先试 Clef-flash。它在 Banking77 上领先,本站每次 1 积分。
- 高频的单问题调用:Liquid AI d1 或 Perplexity Decider v1.2,这种形状下每次最便宜的两个。
- 对长文本问多个问题:Perplexity Decider v1.2,每百万 $0.02 且只读一遍 state;Jev、Luna Decisions 和 Microsoft-Decision-1 也只读一遍。
- 想用 OpenAI 的模型又不想等预览名额:经 OpenRouter 或本站用 Luna Decisions,但要预期偶尔拒答。
- 数据不能离开你的机器:Clef 或 Clef-flash,Apache 2.0 开放权重。Decider v1 的权重也开放;OpenRouter 没有列出 v1.2 的权重。
- Jev 同价位下每次调用最省,且置信度可靠:2026-10-10 新增的 Microsoft-Decision-1。准确率与 Jev 持平,token 更少,校准更好,详见 Jev vs Microsoft-Decision-1;Azure 对它的限流更紧。
- 要最严格的置信度阈值:2026-10-16 新增的 Liquid AI d1-ultra。准确率与 Jev 持平,0.99 以上的 41 条答案全对,但每个问题都重读一遍 state,详见 Jev vs Liquid AI d1-ultra。它在 Artificial Analysis Decision Index 排第一是 Liquid 自己的说法。
- 需要能放心设阈值的置信度:在你自己的数据上测校准;我们这次测试里 Clef 系列最保守。
最终还是要看你自己的数据。把二十条真实输入粘进上面的并排运行器,同时跑两个模型,再和你知道的正确答案对一对。
更多对比
- Jev vs Perplexity Decider:Decider v1.2 与 Jev 正面对比。
- Jev vs Microsoft-Decision-1:微软的模型,发布次日实测。
- Jev vs Liquid AI d1-ultra:Liquid 的新决策模型与 d1,发布次日实测。
- OpenAI Decisions API 替代方案:预览名额没开放时用什么,以及怎么迁移请求。
- Jev vs Clef:Cloudflare 的模型,包括发布时我们测到的 Workers AI 截断,以及发现它已消失的复测(英文)。
- 决策模型价格计算器:八个模型按你的用量算月成本。
来源
- OpenAI Decisions API 预览,DevDay 2026-09-29。Hugging Face 与 r/OpenAI 的报道 (第三方)
- Perplexity Decider 模型、价格与上下文。OpenRouter 模型页 与 Perplexity Decisions API 文档 (厂商)
- System One 接口与请求格式。OpenRouter TypeSafe SDK 指南 (厂商)
- Clef。Cloudflare 博客 (厂商) 与 Cloudflare Clef 实测 (实测)
- 数据集。Banking77 与 AG News 测试集
- 准确率、校准、延迟、token 数与长 state 测试。我们 2026-10-07 的实测,Decider v1.2 为 2026-10-25 (实测)
JevStation 是独立站点。Jev、Clef、Decider 与 GPT-6 Luna 分别是 TypeSafe、Cloudflare、Perplexity 与 OpenAI 的名称;我们与它们均无关联。
常见问题
- 什么是决策模型?
- 返回带类型答案而不是文本的模型:从你列出的选项里选一个、按你定义的等级打分,或给出某个判断为真的概率。内容作为 state 发送,问题作为 schema 发送,拿回可以直接设阈值的概率。TypeSafe 把这一类叫 System One,OpenAI 把自己的版本叫 Decisions API。
- 哪个决策模型最准?
- 看任务。我们 2026-10-07 的测试里,12 个容易混淆的 Banking77 银行卡意图上,Clef-flash 97.9%,领先 Clef(94.8%)、OpenAI Luna Decisions(90.5%)、Jev 和 Perplexity Decider v1(各 86.5%)。AG News 四分类上五个模型都在 89%–93% 之间。2026-10-25 重跑的 Decider v1.2 是 89.6% 和 91%。每个任务约 100 条样本,6 个百分点以内的差距可能只是噪声。
- 不排队能用上 OpenAI Decisions API 吗?
- 我们查看时,OpenAI 自己的 Decisions API 仍是有限预览。OpenRouter 从 2026-10-06 起以 openai/gpt-6-luna-decisions 提供同一个模型,JevStation 经 OpenRouter 运行它:免费注册即送 50 积分,注册后标准评估每次 1 积分。
- 哪个决策模型最便宜?
- 每次只问一个问题时,我们的测试里是 Liquid AI d1:每百万输入 token $0.02,每千次 AG News 调用约 $0.002。问多个问题时是 Perplexity Decider v1.2:单价同样是每百万 $0.02,但只读一遍 state,8,000 字符的文本配 5 个问题约 1,550 token,而每个问题都重读一遍 state 的 d1 约 7,000。其次是 Microsoft-Decision-1(每百万 $0.042,也只读一遍)。10 月已下线的旧版 Decider v1 标价 $0.04,且每个问题都按一次 state 计费。
- 请求格式兼容吗?
- 兼容。经 OpenRouter 的 System One 接口或 JevStation 调用时,五个模型都接受同样的 state 加 Choice、Score、Noul 问题,返回同样结构的答案。换模型只需改一个 model 字段。
- 决策模型能替代 LLM 吗?
- 不能。它们不会写作、总结或用文字推理。它们替代的是你拿来当分类器、路由器、评判器或护栏的那次 LLM 调用——前提是可能的答案能提前列出来。
相关页面
把它接进你的流程
注册即送 50 点,保存自己的问题集,并通过 API 调用同样的评估。