每任务成本(Cost per Task)
每任务成本指的是一条真实任务从开始到交付的总花费,而不是每百万 token 的报价。它把重试次数、缓存命中率、harness 开销和人工收尾时间一起算进分母,因此常把「单价最便宜」的模型排到最贵一档。
发布 2026-11-10更新 2026-11-10核实 2026-11-10什么是每任务成本
每任务成本(cost per task)指完成一条真实任务要花多少钱,而不是每百万 token 报价多少。
两者差在三处,任一处都足以让排序反转:
- 失败也要付钱。一次没做成的尝试照样消耗 token,所以真正该看的是「成功那一次的钱 × 平均试几次」。
- 上下文开销不是常数。同一句需求,有的 harness 首次调用就带 10 倍上下文。
- 人工收尾也是成本。Agent 交付了 70%、剩下 30% 由人补,这部分工时不在任何 token 账单里。
站内讨论 Agent 完成度时反复遇到同一组数字:Co-Design Bench 上最强模型「平均通过 69.9% 的验收标准,但只有 26.4% 的任务全对」——如果按「全对」交付,分母就是 26.4% 而不是 69.9%,成本立刻翻两倍多。详见 Co-Design Bench。
三种口径,别混用
| 口径 | 公式 | 回答什么问题 | 什么时候用 |
|---|---|---|---|
| 每任务成本 | 单次成本 ÷ 任务成功率 | 做完一件事平均花多少 | 内部预算、按任务报价 |
| 每解决任务成本 | 单次成本 ÷ 解决率(严格判定) | 拿到可用结果的代价 | 选型对比、和外包比价 |
| 每通过验收项成本 | 总成本 ÷ 通过的验收标准数 | 部分完成的性价比 | 需求模糊、需人工收尾的任务 |
三者的差别在分母有多严。分母越严,数字越大,也越接近「我到底要掏多少钱」。
实测:按任务重排,榜单几乎反转
Real-SWE 在真实企业私有代码库上跑了 8 个前沿组合,同时公布解决率、单次成本与每解决任务成本——这份数据之所以值得反复引用,是因为它把分母摆出来了:
| 模型 / harness | 解决率 | 单次 rollout | 每解决一任务 |
|---|---|---|---|
| Claude Fable 5.1 / Claude Code | 38.8% | $6.96 | $17.94 |
| GPT-6 Astra / Codex CLI | 33.8% | $4.67 | $13.82 |
| Gemini 3.8 Flash / Gemini CLI | 31.2% | $2.50 | $8.01 |
| GLM 5.3 / Claude Code | 28.8% | $5.12 | $17.78 |
| Kimi K3 / Kimi Code | 18.8% | $3.90 | $20.74 |
三条读法:
- 单次最便宜的,按任务算仍然最便宜(Gemini 3.8 Flash $8.01),但差距从 2.8 倍缩到 2.2 倍——单价优势会被成功率吃掉一部分。
- 单次最贵的,不一定按任务最贵:Kimi K3 单次 $3.90 比 Fable 5.1 的 $6.96 便宜四成,但解决率只有 18.8%,每解决一任务 $20.74 反而是全表最贵。
- 分母不严时更夸张:如果按 Co-Design Bench 那种「全对才算完成」的口径,26.4% 的分母会让同类成本再翻一倍以上。
口径提示:上表「每解决一任务成本」= 单次成本 ÷ 解决率,由 THE DAILY BRIEF 计算;榜单未说明单次成本是否计入 prompt caching,美元列只作方向性参考。完整数据与失败模式分析见 Real-SWE 资讯。
harness tax:成功率不动,成本最多差 5 倍
同一组 21 个模型 × harness 组合的测试结论值得单独记:harness 几乎不改变成功率,但成本最多差 5 倍。
原因不神秘——首次调用携带的上下文规模不同。Claude Code 首次模型调用带的上下文是极简 harness Pi 的 10 倍,这 10 倍在每一次 rollout 里都要重新付一遍。
这条结论和 Agent Harness 里的另一组数据互补:那边测的是 harness 对分数的影响(同一模型换 harness 能差 18.9 个百分点),这边测的是对成本的影响(5 倍)。合起来看:换 harness 可能在不动模型的前提下同时改分数和账单,而且方向不一定一致。
怎么算:一个可复用的算法
每任务成本 ≈ (单次输入 token × 输入价 + 单次输出 token × 输出价 + 缓存读写费)
÷ 任务成功率
+ 人工收尾分钟数 × 你的时薪 ÷ 60
算例(数字仅用于演示口径,非厂商报价):某任务单次消耗输入 80 万 token、输出 4 万 token,模型 $8/$40:
- 单次成本 = 0.8 × 8 + 0.04 × 40 = $8.00
- 若成功率 30% → 每任务成本 = 8.00 ÷ 0.3 = $26.7
- 若人工收尾平均 20 分钟、时薪折 $60 → 再加 $20
- 真实每任务成本 ≈ $46.7,是「$8 一次」这个直觉的 5.8 倍
这个算例的意义不在数字,而在暴露两个最常被忽略的乘数:成功率倒数、人工时间。
常见坑
- 只统计成功的任务:把失败 rollout 的账单丢掉,等于人为压低分母。
- 用标价代替实付:缓存命中率高的长会话,实际输入单价可能只有标价的一小部分;反过来,高变更频率的上下文会让缓存写比输入还贵。见 提示词缓存。
- 忽略收尾成本:Agent 交回「70% 完成」时,剩下 30% 往往是最费人的部分。
- 跨 harness 比价:不同 harness 的上下文注入策略不同,同一模型能差出数倍。
- 拿厂商标称的分母:厂商公布的「每任务成本」通常用自家 harness、自家任务集、自家成功率口径。只能同表内比,不能跨表比。
选型时怎么记
建议每个候选组合记一行,四项缺一不可:
| 字段 | 说明 |
|---|---|
| 单次成本 | 自己的任务集上实测的均值,不要用报价 |
| 成功率 | 用「能不能直接用」判定,不是「大部分做了」 |
| 每任务成本 | 单次 ÷ 成功率 |
| 人工收尾分钟 | 人工复核 + 修补的平均用时 |
四行数据比任何排行榜都有用,因为它用的是你自己的任务分布。
相关阅读
- 概念:Agent Harness · 提示词缓存 · Agent 结果核验 · Reward Hacking
- 基准:SWE-bench · Terminal-Bench
- 数据:Real-SWE 私有代码库基准 · Co-Design Bench
- 模型:Claude Fable 5.1 · Meta Muse Wonder
- 资讯:Meta Muse Ember:把每任务成本当卖点
来源
常见问题
每任务成本就是「一次调用的钱」吗?
不是。一次 rollout 的钱只是分子。真正的每任务成本 = 单次尝试成本 ÷ 任务成功率,因为失败的那几次钱也要算进去。如果还要人工收尾,人工时间也应折进分母或单独列一栏。
为什么便宜的模型经常算出更贵?
因为便宜模型的成功率低,分母被压小。Real-SWE 的例子最直观:Gemini 3.8 Flash 单次只要 $2.50、解决率 31.2%,每解决一任务 $8.01;Claude Fable 5.1 单次 $6.96、解决率 38.8%,每解决一任务 $17.94——单次贵 2.8 倍,按任务算只贵 2.2 倍,但两者都比单次报价给人的印象更接近。
harness 也会影响成本吗?
影响很大。Berkeley Sky Lab 测了 21 组模型 × harness 组合,结论是 harness 几乎不改变成功率,但成本最多差 5 倍——同一个模型在 Claude Code 里的成本是极简 harness Pi 的两倍,部分原因是首次模型调用携带的上下文差了 10 倍。
相关工具
Aider vs Claude Code:终端 AI 编程双雄怎么选
Aider vs Claude Code 2026 选型对比:开源 BYOK 多模型 vs Anthropic 订阅长任务 Agent,从编程能力、多模型支持、价格、Git 集成、国内可用性和适合人群判断,帮你选对终端 AI 编程工具。
Cursor vs Aider:GUI IDE 还是 CLI?2026 对比
Cursor vs Aider 2026 选型对比:GUI IDE vs Git 原生 CLI,从 Composer vs Architect 双模型、Tab 补全、多模型 BYOK、价格计费、开源与否和适合人群判断,帮开发者选对。Cursor 是闭源 VS Code fork 月费 $20,Aider 是开源 Apache-2.0 CLI 自带 API key。
Augment Code vs Cursor:企业 AI 编程怎么选?Context Engine vs AI IDE 对比
Augment Code vs Cursor 2026 选型对比:Context Engine 全仓索引的企业 AI 平台 vs SpaceX 收购的 AI IDE 天花板,从形态、Context 覆盖、长任务、价格、合规、中文支持和适合人群 8 个维度判断,帮你选对企业 AI 编程工具。
Claude Code vs Cline:CLI AI Agent 怎么选?2026 对比
Claude Code vs Cline 2026 选型对比:Anthropic 官方闭源 CLI Agent vs Apache-2.0 开源 VS Code 插件。从模型绑定、工作流、MCP 支持、价格、隐私和适合人群 6 个维度帮你选对 CLI AI 编程工具。
Claude Code vs Codex CLI:终端 AI Agent 双雄对比
Claude Code vs Codex CLI 2026 选型对比:Anthropic 与 OpenAI 两大官方终端 Agent 的模型、长任务、MCP 生态、Windows 支持、订阅打包价格和国内可用性全方位对比,帮你判断该用哪个终端 AI Agent,以及能不能两个一起用。
Claude Code vs Crush:Anthropic 官方 vs 多模型 TUI(2026 实测选型)
Claude Code vs Crush 怎么选:Anthropic 官方 CLI(长任务最稳),对上 Charmbracelet 开源 TUI(多模型切换 + LSP)。按模型、长任务、价格对比。