Claude CodeとDevin Fusion CLI
Claude CodeとDevin Fusion CLIをArtificial Analysis Coding Agent Indexのベンチマークスコア、コスト、実行時間、トークン使用量で比較します。
詳しい方法論は、方法論ページをご覧ください。
ほかの比較を見る
vs
ハイライト
比較
Claude Code と Devin Fusion CLI の並列比較。
コーディングエージェント比較
指標 | 分析 | ||
|---|---|---|---|
エージェントハーネス | Claude Code | Devin Fusion CLI | |
代表モデル | Fable 5.1 (max) (with fallback) | Claude Fable 5.1 XHigh + SWE-2 Medium | |
Coding Agent Index | 62 | 62 | Claude Code は Devin Fusion CLI よりCoding Agent Indexが高いです |
DeepSWE v1.1 | 64% | 63% | Claude Code は Devin Fusion CLI より DeepSWE v1.1 のスコアが高いです |
Terminal-Bench 4.0 | 58% | 56% | Claude Code は Devin Fusion CLI より Terminal-Bench 4.0 のスコアが高いです |
SWE-Atlas-QnA | 65% | 66% | Devin Fusion CLI は Claude Code より SWE-Atlas-QnA のスコアが高いです |
タスクあたりのコスト | $12.39 | $7.90 | Devin Fusion CLI は Claude Code よりタスクあたりのコストが低いです |
タスクあたりの時間 | 34.8m | 35.8m | Claude Code は Devin Fusion CLI よりタスクあたりの時間が短いです |
タスクあたりのターン数 | 36.7 | 99.5 | Claude Code は Devin Fusion CLI よりタスクあたりのターン数が少ないです |
タスクあたりのトークン使用量 | 5.7M | 9.7M | Claude Code は Devin Fusion CLI よりタスクあたりのトークン使用量が少ないです |
キャッシュヒット率 | 92% | 96% | Devin Fusion CLI は Claude Code よりキャッシュヒット率が高いです |
モデルバリアント
Claude Code と Devin Fusion CLI の評価済みモデルバリアント。
モデルバリアント
62 | 64% | 58% | 65% | $12.39 | 34.8m | 5.7M | ||
60 | 63% | 55% | 62% | $10.79 | 41.9m | 11.4M | ||
43 | 51% | 17% | 62% | $3.49 | 1.1h | 8.7M | ||
62 | 63% | 56% | 66% | $7.90 | 35.8m | 9.7M | ||
59 | 67% | 50% | 59% | $4.54 | 24.7m | 6.1M |
パフォーマンス
Artificial Analysis Coding Agent Indexにおけるパフォーマンス。
Artificial Analysis Coding Agent Index
Artificial Analysis Coding Agent Index v1.5 incorporates 3 benchmarks: DeepSWE v1.1, Terminal-Bench 4.0, and SWE-Atlas-QnA · Higher is better
Color by
Artificial Analysis Coding Agent Index vs. タスクあたりのコスト
Artificial Analysis Coding Agent Index vs. タスクあたりの平均トークン従量課金APIコスト(USD)
Color by
Most attractive quadrant
Pareto line
トークン使用量
Artificial Analysis Coding Agent Indexにおけるトークン消費量。
タスクあたりのトークン使用量
タスクあたりの入力・キャッシュ・出力トークンの平均
Prompt cache hit rates can vary significantly by provider routing, which can materially change effective cost.
Artificial Analysis Coding Agent Index vs. 合計トークン
Artificial Analysis Coding Agent Index vs. タスクあたりの平均合計トークン
Color by
Most attractive quadrant
コスト
現在のトークン単位の価格に基づく、Artificial Analysis Coding Agent Indexのトークン従量課金APIコスト。
タスクあたりのコスト
Average pay-per-token API cost per task (USD) · Lower is better
Color by
実行時間
Artificial Analysis Coding Agent Indexにおけるエージェントの実稼働時間。
タスクあたりの時間
Average agent wall time per task · Lower is better
Color by
Artificial Analysis Coding Agent Index vs. 実行時間
Artificial Analysis Coding Agent Index vs. タスクあたりの平均エージェント稼働時間
Color by
Most attractive quadrant