Devin Fusion CLI 与 Mirror

根据 Artificial Analysis Coding Agent Index比较 Devin Fusion CLI 与 Mirror,包括基准测试得分、成本、执行时间和 token 用量。

有关我们方法论的详细信息,请参阅方法论页面。

浏览其他比较
vs
Artificial Analysis Coding Agent Index v1.5 · Higher is better
Average agent wall time per task · Lower is better
Average API cost per task (USD) · Lower is better

比较

Devin Fusion CLI 与 Mirror 的并排比较。

编程智能体比较

指标
Devin Fusion CLI
Claude Opus 5.5 Max + GPT-6 Luna High
Mirror
Beam 1.0
分析
智能体 Harness
Devin Fusion CLI
Mirror
代表模型
Claude Opus 5.5 Max + GPT-6 Luna High
Beam 1.0
Coding Agent Index
68
28
Devin Fusion CLI 的 Coding Agent Index 高于 Mirror
DeepSWE v1.1
73%
40%
Devin Fusion CLI 的 DeepSWE v1.1 分数高于 Mirror
Terminal-Bench 4.0
62%
4%
Devin Fusion CLI 的 Terminal-Bench 4.0 分数高于 Mirror
SWE-Atlas-QnA
70%
40%
Devin Fusion CLI 的 SWE-Atlas-QnA 分数高于 Mirror
每个任务的成本
US$9.01
US$0.00
无法比较
每个任务的时间
54.8分钟
42.4分钟
Mirror 的每个任务时间短于 Devin Fusion CLI
每个任务的轮次
115.6
95.9
Mirror 的每个任务轮次少于 Devin Fusion CLI
每个任务的 Token 用量
1280.7万
506.6万
Mirror 的每个任务 token 用量少于 Devin Fusion CLI
缓存命中率
87%
0.0%
Devin Fusion CLI 的缓存命中率高于 Mirror

模型变体

Devin Fusion CLI 与 Mirror 的已评估模型变体。

模型变体

Devin Fusion CLI
Claude Opus 5.5 Max + GPT-6 Luna High
68
73%
62%
70%
US$9.01
54.8分钟
1280.7万
Devin Fusion CLI
Claude Fable 5.1 XHigh + SWE-2 Medium
62
63%
56%
66%
US$7.90
35.8分钟
969.2万
Devin Fusion CLI
GPT-6 Astra XHigh + SWE-2 Medium
59
67%
50%
59%
US$4.54
24.7分钟
607.4万
Mirror
Beam 1.0
28
40%
4%
40%
US$0.00
42.4分钟
506.6万

性能

Artificial Analysis Coding Agent Index上的性能。

Artificial Analysis Coding Agent Index

Artificial Analysis Coding Agent Index v1.5 incorporates 3 benchmarks: DeepSWE v1.1, Terminal-Bench 4.0, and SWE-Atlas-QnA · Higher is better

Artificial Analysis Coding Agent Index vs. 每个任务的成本

Artificial Analysis Coding Agent Index vs. 每个任务的平均按 token 计费 API 成本(USD)
Most attractive quadrant

Token 用量

Artificial Analysis Coding Agent Index上的 token 消耗。

每个任务的 Token 用量

每个任务的平均输入、缓存和输出 token
提示词缓存命中率可能因提供商路由而显著变化,从而实质性地影响实际成本。

Artificial Analysis Coding Agent Index vs. 总 Token

Artificial Analysis Coding Agent Index vs. 每个任务的平均总 Token
Most attractive quadrant

成本

基于当前按 token 计费价格的 Artificial Analysis Coding Agent Index按 token 计费 API 成本。

每个任务的成本

Average pay-per-token API cost per task (USD) · Lower is better

执行时间

Artificial Analysis Coding Agent Index上的智能体活跃运行时间。

每个任务的时间

Average agent wall time per task · Lower is better

Artificial Analysis Coding Agent Index vs. 执行时间

Artificial Analysis Coding Agent Index vs. 每个任务的平均智能体运行时间
Most attractive quadrant