GitHub Copilot vs. Muse Code
Comparación entre GitHub Copilot y Muse Code en el Artificial Analysis Coding Agent Index, incluidos resultados de benchmarks, costo, tiempo de ejecución y uso de tokens.
Para más detalles sobre nuestra metodología, consulta nuestra página de metodología.
Explora otras comparaciones
vs
Comparación
Comparación lado a lado de GitHub Copilot y Muse Code.
Comparación de agentes de programación
Métrica | Análisis | ||
|---|---|---|---|
Harness del agente | GitHub Copilot | Muse Code | |
Modelo representativo | Copilot Fusion (Max) | Muse Wonder Full (Max) | |
Coding Agent Index | 60 | 59 | GitHub Copilot tiene un Coding Agent Index más alto que Muse Code |
FrontierCode v1.1 | 51% | 49% | GitHub Copilot tiene una puntuación más alta en FrontierCode v1.1 que Muse Code |
Terminal-Bench 4.0 | 71% | 59% | GitHub Copilot tiene una puntuación más alta en Terminal-Bench 4.0 que Muse Code |
SWE-Atlas-QnA-AA | 57% | 69% | Muse Code tiene una puntuación más alta en SWE-Atlas-QnA-AA que GitHub Copilot |
Costo por tarea | 5,59 US$ | 0,00 US$ | Comparación no disponible |
Tiempo por tarea | 36,1min | 34,9min | Muse Code tiene un tiempo por tarea más bajo que GitHub Copilot |
Turnos por tarea | 171 | 194,9 | GitHub Copilot tiene menos turnos por tarea que Muse Code |
Uso de tokens por tarea | 7,3 M | 14,5 M | GitHub Copilot tiene un uso de tokens por tarea más bajo que Muse Code |
Tasa de aciertos de caché | 97 % | 96 % | GitHub Copilot tiene una tasa de aciertos de caché más alta que Muse Code |
Variantes de modelo
Variantes de modelo evaluadas para GitHub Copilot y Muse Code.
Variantes de modelo
60 | 51% | 71% | 57% | 5,59 US$ | 36,1min | 7,3 M | ||
59 | 49% | 59% | 69% | 0,00 US$ | 34,9min | 14,5 M | ||
52 | 46% | 48% | 62% | 8,05 US$ | 24,5min | 14,5 M | ||
46 | 47% | 32% | 59% | 3,91 US$ | 23,3min | 17,8 M | ||
26 | 23% | 6% | 51% | 3,54 US$ | 26,0min | 13,3 M |
Rendimiento
Rendimiento en el Artificial Analysis Coding Agent Index.
Artificial Analysis Coding Agent Index
Artificial Analysis Coding Agent Index v2.0 incorporates 3 benchmarks: FrontierCode v1.1, Terminal-Bench 4.0, and SWE-Atlas-QnA-AA · Higher is better
Colorear por
Artificial Analysis Coding Agent Index vs. costo por tarea
Artificial Analysis Coding Agent Index vs. promedio del costo de la API de pago por token por tarea (USD)
Colorear por
Most attractive quadrant
Uso de tokens
Consumo de tokens en el Artificial Analysis Coding Agent Index.
Uso de tokens por tarea
Promedio de tokens de entrada, caché y salida por tarea
Las tasas de aciertos de la caché de prompts pueden variar mucho según el enrutamiento del proveedor, lo que puede cambiar sustancialmente el costo efectivo.
Artificial Analysis Coding Agent Index vs. tokens totales
Artificial Analysis Coding Agent Index vs. promedio de tokens totales por tarea
Colorear por
Most attractive quadrant
Costo
Costo de la API de pago por token en el Artificial Analysis Coding Agent Index, según los precios actuales por token.
Costo por tarea
Average pay-per-token API cost per task (USD) · Lower is better
Colorear por
Tiempo de ejecución
Tiempo de ejecución activo del agente en el Artificial Analysis Coding Agent Index.
Tiempo por tarea
Average agent wall time per task · Lower is better
Colorear por
Artificial Analysis Coding Agent Index vs. tiempo de ejecución
Artificial Analysis Coding Agent Index vs. promedio del tiempo de ejecución del agente por tarea
Colorear por
Most attractive quadrant