Claude Code vs. Devin Fusion CLI
Comparación entre Claude Code y Devin Fusion CLI en el Índice de agentes de programación de Artificial Analysis, incluidos resultados de benchmarks, costo, tiempo de ejecución y uso de tokens.
Para más detalles sobre nuestra metodología, consulta nuestra página de metodología.
Destacados
Comparación
Comparación lado a lado de Claude Code y Devin Fusion CLI.
Comparación de agentes de programación
Métrica | Análisis | ||
|---|---|---|---|
Harness del agente | Claude Code | Devin Fusion CLI | |
Modelo representativo | Fable 5.1 (max) (with fallback) | Claude Fable 5.1 XHigh + SWE-2 Medium | |
Índice de agentes de programación | 62 | 62 | Claude Code tiene un Índice de agentes de programación más alto que Devin Fusion CLI |
DeepSWE v1.1 | 64% | 63% | Claude Code tiene una puntuación más alta en DeepSWE v1.1 que Devin Fusion CLI |
Terminal-Bench 4.0 | 58% | 56% | Claude Code tiene una puntuación más alta en Terminal-Bench 4.0 que Devin Fusion CLI |
SWE-Atlas-QnA | 65% | 66% | Devin Fusion CLI tiene una puntuación más alta en SWE-Atlas-QnA que Claude Code |
Costo por tarea | $12.39 | $7.90 | Devin Fusion CLI tiene un costo por tarea más bajo que Claude Code |
Tiempo por tarea | 34.8m | 35.8m | Claude Code tiene un tiempo por tarea más bajo que Devin Fusion CLI |
Turnos por tarea | 36.7 | 99.5 | Claude Code tiene menos turnos por tarea que Devin Fusion CLI |
Uso de tokens por tarea | 5.7M | 9.7M | Claude Code tiene un uso de tokens por tarea más bajo que Devin Fusion CLI |
Tasa de aciertos de caché | 92% | 96% | Devin Fusion CLI tiene una tasa de aciertos de caché más alta que Claude Code |
Variantes de modelo
Variantes de modelo evaluadas para Claude Code y Devin Fusion CLI.
Variantes de modelo
62 | 64% | 58% | 65% | $12.39 | 34.8m | 5.7M | ||
60 | 63% | 55% | 62% | $10.79 | 41.9m | 11.4M | ||
43 | 51% | 17% | 62% | $3.49 | 1.1h | 8.7M | ||
62 | 63% | 56% | 66% | $7.90 | 35.8m | 9.7M | ||
59 | 67% | 50% | 59% | $4.54 | 24.7m | 6.1M |
Rendimiento
Rendimiento en el Índice de agentes de programación de Artificial Analysis.
Índice de agentes de programación de Artificial Analysis
Índice de agentes de programación de Artificial Analysis vs. costo por tarea
Uso de tokens
Consumo de tokens en el Índice de agentes de programación de Artificial Analysis.
Uso de tokens por tarea
Índice de agentes de programación de Artificial Analysis vs. tokens totales
Costo
Costo de la API de pago por token en el Índice de agentes de programación de Artificial Analysis, según los precios actuales por token.
Costo por tarea
Tiempo de ejecución
Tiempo de ejecución activo del agente en el Índice de agentes de programación de Artificial Analysis.