跳到主内容
方法论cost per task每任务成本agent 成本选型token 计费benchmark

每任务成本(Cost per Task)

每任务成本指的是一条真实任务从开始到交付的总花费,而不是每百万 token 的报价。它把重试次数、缓存命中率、harness 开销和人工收尾时间一起算进分母,因此常把「单价最便宜」的模型排到最贵一档。

发布 2026-11-10更新 2026-11-10核实 2026-11-10

什么是每任务成本

每任务成本(cost per task)指完成一条真实任务要花多少钱,而不是每百万 token 报价多少。

两者差在三处,任一处都足以让排序反转:

  1. 失败也要付钱。一次没做成的尝试照样消耗 token,所以真正该看的是「成功那一次的钱 × 平均试几次」。
  2. 上下文开销不是常数。同一句需求,有的 harness 首次调用就带 10 倍上下文。
  3. 人工收尾也是成本。Agent 交付了 70%、剩下 30% 由人补,这部分工时不在任何 token 账单里。

站内讨论 Agent 完成度时反复遇到同一组数字:Co-Design Bench 上最强模型「平均通过 69.9% 的验收标准,但只有 26.4% 的任务全对」——如果按「全对」交付,分母就是 26.4% 而不是 69.9%,成本立刻翻两倍多。详见 Co-Design Bench。

三种口径,别混用

口径公式回答什么问题什么时候用
每任务成本单次成本 ÷ 任务成功率做完一件事平均花多少内部预算、按任务报价
每解决任务成本单次成本 ÷ 解决率(严格判定)拿到可用结果的代价选型对比、和外包比价
每通过验收项成本总成本 ÷ 通过的验收标准数部分完成的性价比需求模糊、需人工收尾的任务

三者的差别在分母有多严。分母越严,数字越大,也越接近「我到底要掏多少钱」。

实测:按任务重排,榜单几乎反转

Real-SWE 在真实企业私有代码库上跑了 8 个前沿组合,同时公布解决率、单次成本与每解决任务成本——这份数据之所以值得反复引用,是因为它把分母摆出来了:

模型 / harness解决率单次 rollout每解决一任务
Claude Fable 5.1 / Claude Code38.8%$6.96$17.94
GPT-6 Astra / Codex CLI33.8%$4.67$13.82
Gemini 3.8 Flash / Gemini CLI31.2%$2.50$8.01
GLM 5.3 / Claude Code28.8%$5.12$17.78
Kimi K3 / Kimi Code18.8%$3.90$20.74

三条读法:

  • 单次最便宜的,按任务算仍然最便宜(Gemini 3.8 Flash $8.01),但差距从 2.8 倍缩到 2.2 倍——单价优势会被成功率吃掉一部分。
  • 单次最贵的,不一定按任务最贵:Kimi K3 单次 $3.90 比 Fable 5.1 的 $6.96 便宜四成,但解决率只有 18.8%,每解决一任务 $20.74 反而是全表最贵。
  • 分母不严时更夸张:如果按 Co-Design Bench 那种「全对才算完成」的口径,26.4% 的分母会让同类成本再翻一倍以上。

口径提示:上表「每解决一任务成本」= 单次成本 ÷ 解决率,由 THE DAILY BRIEF 计算;榜单未说明单次成本是否计入 prompt caching,美元列只作方向性参考。完整数据与失败模式分析见 Real-SWE 资讯。

harness tax:成功率不动,成本最多差 5 倍

同一组 21 个模型 × harness 组合的测试结论值得单独记:harness 几乎不改变成功率,但成本最多差 5 倍。

原因不神秘——首次调用携带的上下文规模不同。Claude Code 首次模型调用带的上下文是极简 harness Pi 的 10 倍,这 10 倍在每一次 rollout 里都要重新付一遍。

这条结论和 Agent Harness 里的另一组数据互补:那边测的是 harness 对分数的影响(同一模型换 harness 能差 18.9 个百分点),这边测的是对成本的影响(5 倍)。合起来看:换 harness 可能在不动模型的前提下同时改分数和账单,而且方向不一定一致。

怎么算:一个可复用的算法

每任务成本 ≈ (单次输入 token × 输入价 + 单次输出 token × 输出价 + 缓存读写费)
            ÷ 任务成功率
            + 人工收尾分钟数 × 你的时薪 ÷ 60

算例(数字仅用于演示口径,非厂商报价):某任务单次消耗输入 80 万 token、输出 4 万 token,模型 $8/$40:

  • 单次成本 = 0.8 × 8 + 0.04 × 40 = $8.00
  • 若成功率 30% → 每任务成本 = 8.00 ÷ 0.3 = $26.7
  • 若人工收尾平均 20 分钟、时薪折 $60 → 再加 $20
  • 真实每任务成本 ≈ $46.7,是「$8 一次」这个直觉的 5.8 倍

这个算例的意义不在数字,而在暴露两个最常被忽略的乘数:成功率倒数、人工时间。

常见坑

  • 只统计成功的任务:把失败 rollout 的账单丢掉,等于人为压低分母。
  • 用标价代替实付:缓存命中率高的长会话,实际输入单价可能只有标价的一小部分;反过来,高变更频率的上下文会让缓存写比输入还贵。见 提示词缓存。
  • 忽略收尾成本:Agent 交回「70% 完成」时,剩下 30% 往往是最费人的部分。
  • 跨 harness 比价:不同 harness 的上下文注入策略不同,同一模型能差出数倍。
  • 拿厂商标称的分母:厂商公布的「每任务成本」通常用自家 harness、自家任务集、自家成功率口径。只能同表内比,不能跨表比。

选型时怎么记

建议每个候选组合记一行,四项缺一不可:

字段说明
单次成本自己的任务集上实测的均值,不要用报价
成功率用「能不能直接用」判定,不是「大部分做了」
每任务成本单次 ÷ 成功率
人工收尾分钟人工复核 + 修补的平均用时

四行数据比任何排行榜都有用,因为它用的是你自己的任务分布。

相关阅读

来源

常见问题

每任务成本就是「一次调用的钱」吗?

不是。一次 rollout 的钱只是分子。真正的每任务成本 = 单次尝试成本 ÷ 任务成功率,因为失败的那几次钱也要算进去。如果还要人工收尾,人工时间也应折进分母或单独列一栏。

为什么便宜的模型经常算出更贵?

因为便宜模型的成功率低,分母被压小。Real-SWE 的例子最直观:Gemini 3.8 Flash 单次只要 $2.50、解决率 31.2%,每解决一任务 $8.01;Claude Fable 5.1 单次 $6.96、解决率 38.8%,每解决一任务 $17.94——单次贵 2.8 倍,按任务算只贵 2.2 倍,但两者都比单次报价给人的印象更接近。

harness 也会影响成本吗?

影响很大。Berkeley Sky Lab 测了 21 组模型 × harness 组合,结论是 harness 几乎不改变成功率,但成本最多差 5 倍——同一个模型在 Claude Code 里的成本是极简 harness Pi 的两倍,部分原因是首次模型调用携带的上下文差了 10 倍。

相关对比

Aider vs Claude Code:终端 AI 编程双雄怎么选

Aider vs Claude Code 2026 选型对比:开源 BYOK 多模型 vs Anthropic 订阅长任务 Agent,从编程能力、多模型支持、价格、Git 集成、国内可用性和适合人群判断,帮你选对终端 AI 编程工具。

Cursor vs Aider:GUI IDE 还是 CLI?2026 对比

Cursor vs Aider 2026 选型对比:GUI IDE vs Git 原生 CLI,从 Composer vs Architect 双模型、Tab 补全、多模型 BYOK、价格计费、开源与否和适合人群判断,帮开发者选对。Cursor 是闭源 VS Code fork 月费 $20,Aider 是开源 Apache-2.0 CLI 自带 API key。

Augment Code vs Cursor:企业 AI 编程怎么选?Context Engine vs AI IDE 对比

Augment Code vs Cursor 2026 选型对比:Context Engine 全仓索引的企业 AI 平台 vs SpaceX 收购的 AI IDE 天花板,从形态、Context 覆盖、长任务、价格、合规、中文支持和适合人群 8 个维度判断,帮你选对企业 AI 编程工具。

Claude Code vs Cline:CLI AI Agent 怎么选?2026 对比

Claude Code vs Cline 2026 选型对比:Anthropic 官方闭源 CLI Agent vs Apache-2.0 开源 VS Code 插件。从模型绑定、工作流、MCP 支持、价格、隐私和适合人群 6 个维度帮你选对 CLI AI 编程工具。

Claude Code vs Codex CLI:终端 AI Agent 双雄对比

Claude Code vs Codex CLI 2026 选型对比:Anthropic 与 OpenAI 两大官方终端 Agent 的模型、长任务、MCP 生态、Windows 支持、订阅打包价格和国内可用性全方位对比,帮你判断该用哪个终端 AI Agent,以及能不能两个一起用。

Claude Code vs Crush:Anthropic 官方 vs 多模型 TUI(2026 实测选型)

Claude Code vs Crush 怎么选:Anthropic 官方 CLI(长任务最稳),对上 Charmbracelet 开源 TUI(多模型切换 + LSP)。按模型、长任务、价格对比。