Devin Fusion CLIとGitHub Copilot
Devin Fusion CLIとGitHub CopilotをArtificial Analysis Coding Agent Indexのベンチマークスコア、コスト、実行時間、トークン使用量で比較します。
詳しい方法論は、方法論ページをご覧ください。
ほかの比較を見る
vs
比較
Devin Fusion CLI と GitHub Copilot の並列比較。
コーディングエージェント比較
指標 |  Devin Fusion CLI Claude Opus 5.5 Max + GPT-6 Luna High |  GitHub CopilotCopilot Fusion (Max) | 分析 |
|---|---|---|---|
エージェントハーネス | Devin Fusion CLI | GitHub Copilot | |
代表モデル | Claude Opus 5.5 Max + GPT-6 Luna High | Copilot Fusion (Max) | |
Coding Agent Index | 62 | 60 | Devin Fusion CLI は GitHub Copilot よりCoding Agent Indexが高いです |
FrontierCode v1.1 | 54% | 51% | Devin Fusion CLI は GitHub Copilot より FrontierCode v1.1 のスコアが高いです |
Terminal-Bench 4.0 | 63% | 71% | GitHub Copilot は Devin Fusion CLI より Terminal-Bench 4.0 のスコアが高いです |
SWE-Atlas-QnA-AA | 68% | 57% | Devin Fusion CLI は GitHub Copilot より SWE-Atlas-QnA-AA のスコアが高いです |
タスクあたりのコスト | $8.00 | $5.59 | GitHub Copilot は Devin Fusion CLI よりタスクあたりのコストが低いです |
タスクあたりの時間 | 51.1m | 36.1m | GitHub Copilot は Devin Fusion CLI よりタスクあたりの時間が短いです |
タスクあたりのターン数 | 99.5 | 171 | Devin Fusion CLI は GitHub Copilot よりタスクあたりのターン数が少ないです |
タスクあたりのトークン使用量 | 1046.3万 | 733.9万 | GitHub Copilot は Devin Fusion CLI よりタスクあたりのトークン使用量が少ないです |
キャッシュヒット率 | 87% | 97% | GitHub Copilot は Devin Fusion CLI よりキャッシュヒット率が高いです |
モデルバリアント
Devin Fusion CLI と GitHub Copilot の評価済みモデルバリアント。
モデルバリアント
| Devin Fusion CLI | Claude Opus 5.5 Max + GPT-6 Luna High | 62 | 54% | 63% | 68% | $8.00 | 51.1m | 1046.3万 |
| Devin Fusion CLI | Claude Fable 5.1 XHigh + SWE-2 Medium | 59 | 52% | 56% | 68% | $8.20 | 37.6m | 980.9万 |
| Devin Fusion CLI |  GPT-6 Astra XHigh + SWE-2 Medium | 53 | 49% | 50% | 60% | $4.34 | 21.2m | 362.5万 |
| GitHub Copilot | Copilot Fusion (Max) | 60 | 51% | 71% | 57% | $5.59 | 36.1m | 733.9万 |
パフォーマンス
Artificial Analysis Coding Agent Indexにおけるパフォーマンス。
Artificial Analysis Coding Agent Index
Artificial Analysis Coding Agent Index v2.0 incorporates 3 benchmarks: FrontierCode v1.1, Terminal-Bench 4.0, and SWE-Atlas-QnA-AA · Higher is better
色分け
Artificial Analysis Coding Agent Index vs. タスクあたりのコスト
Artificial Analysis Coding Agent Index vs. タスクあたりの平均トークン従量課金APIコスト（USD）
色分け
Most attractive quadrant
Pareto line
トークン使用量
Artificial Analysis Coding Agent Indexにおけるトークン消費量。
タスクあたりのトークン使用量
タスクあたりの入力・キャッシュ・出力トークンの平均
プロンプトキャッシュのヒット率はプロバイダーのルーティングによって大きく変わる可能性があり、実効コストに大きく影響することがあります。
Artificial Analysis Coding Agent Index vs. 合計トークン
Artificial Analysis Coding Agent Index vs. タスクあたりの平均合計トークン
色分け
Most attractive quadrant
コスト
現在のトークン単位の価格に基づく、Artificial Analysis Coding Agent Indexのトークン従量課金APIコスト。
タスクあたりのコスト
Average pay-per-token API cost per task (USD) · Lower is better
色分け
実行時間
Artificial Analysis Coding Agent Indexにおけるエージェントの実稼働時間。
タスクあたりの時間
Average agent wall time per task · Lower is better
色分け
Artificial Analysis Coding Agent Index vs. 実行時間
Artificial Analysis Coding Agent Index vs. タスクあたりの平均エージェント稼働時間
色分け
Most attractive quadrant