Mirror vs. Muse Code

Comparación entre Mirror y Muse Code en el Artificial Analysis Coding Agent Index, incluidos resultados de benchmarks, costo, tiempo de ejecución y uso de tokens.

Para más detalles sobre nuestra metodología, consulta nuestra página de metodología.

Explora otras comparaciones
vs
Artificial Analysis Coding Agent Index v1.5 · Higher is better
Average agent wall time per task · Lower is better
Average API cost per task (USD) · Lower is better

Comparación

Comparación lado a lado de Mirror y Muse Code.

Comparación de agentes de programación

Métrica
Mirror
Beam 1.0
Muse Code
Muse Wonder Full (max)
Análisis
Harness del agente
Mirror
Muse Code
Modelo representativo
Beam 1.0
Muse Wonder Full (max)
Coding Agent Index
28
68
Muse Code tiene un Coding Agent Index más alto que Mirror
DeepSWE v1.1
40%
77%
Muse Code tiene una puntuación más alta en DeepSWE v1.1 que Mirror
Terminal-Bench 4.0
4%
59%
Muse Code tiene una puntuación más alta en Terminal-Bench 4.0 que Mirror
SWE-Atlas-QnA
40%
68%
Muse Code tiene una puntuación más alta en SWE-Atlas-QnA que Mirror
Costo por tarea
0,00 US$
0,00 US$
Comparación no disponible
Tiempo por tarea
42,4min
28,8min
Muse Code tiene un tiempo por tarea más bajo que Mirror
Turnos por tarea
95,9
195
Mirror tiene menos turnos por tarea que Muse Code
Uso de tokens por tarea
5,1 M
15 M
Mirror tiene un uso de tokens por tarea más bajo que Muse Code
Tasa de aciertos de caché
0,0 %
96 %
Muse Code tiene una tasa de aciertos de caché más alta que Mirror

Variantes de modelo

Variantes de modelo evaluadas para Mirror y Muse Code.

Variantes de modelo

Mirror
Beam 1.0
28
40%
4%
40%
0,00 US$
42,4min
5,1 M
Muse Code
Muse Wonder Full (max)
68
77%
59%
68%
0,00 US$
28,8min
15 M
Muse Code
Muse Wonder (max)
63
76%
47%
67%
8,05 US$
22,4min
15 M
Muse Code
Muse Spark 1.3 (max)
54
72%
32%
59%
3,98 US$
18,4min
16,7 M
Muse Code
Muse Spark 1.3 (xhigh)
48
73%
17%
55%
3,47 US$
18,3min
16,2 M
Muse Code
Muse Spark Open (xhigh)
41
60%
6%
58%
3,33 US$
25,2min
16,3 M

Rendimiento

Rendimiento en el Artificial Analysis Coding Agent Index.

Artificial Analysis Coding Agent Index

Artificial Analysis Coding Agent Index v1.5 incorporates 3 benchmarks: DeepSWE v1.1, Terminal-Bench 4.0, and SWE-Atlas-QnA · Higher is better

Artificial Analysis Coding Agent Index vs. costo por tarea

Artificial Analysis Coding Agent Index vs. promedio del costo de la API de pago por token por tarea (USD)
Most attractive quadrant
No data available

Uso de tokens

Consumo de tokens en el Artificial Analysis Coding Agent Index.

Uso de tokens por tarea

Promedio de tokens de entrada, caché y salida por tarea
Las tasas de aciertos de la caché de prompts pueden variar mucho según el enrutamiento del proveedor, lo que puede cambiar sustancialmente el costo efectivo.

Artificial Analysis Coding Agent Index vs. tokens totales

Artificial Analysis Coding Agent Index vs. promedio de tokens totales por tarea
Most attractive quadrant

Costo

Costo de la API de pago por token en el Artificial Analysis Coding Agent Index, según los precios actuales por token.

Costo por tarea

Average pay-per-token API cost per task (USD) · Lower is better
No data available

Tiempo de ejecución

Tiempo de ejecución activo del agente en el Artificial Analysis Coding Agent Index.

Tiempo por tarea

Average agent wall time per task · Lower is better

Artificial Analysis Coding Agent Index vs. tiempo de ejecución

Artificial Analysis Coding Agent Index vs. promedio del tiempo de ejecución del agente por tarea
Most attractive quadrant