Codex vs. Mirror
Comparação entre Codex e Mirror no Artificial Analysis Coding Agent Index, incluindo pontuações de benchmarks, custo, tempo de execução e uso de tokens.
Para saber mais sobre nossa metodologia, consulte a página de metodologia.
Explore outras comparações
vs
Comparação
Comparação lado a lado de Codex e Mirror.
Comparação de agentes de programação
Métrica |  CodexGPT-6.1 Sol (xhigh) |  Mirror Beam 1.0 | Análise |
|---|---|---|---|
Harness do agente | Codex | Mirror | |
Modelo representativo | GPT-6.1 Sol (xhigh) | Beam 1.0 | |
Coding Agent Index | 63 | 28 | Codex tem um Coding Agent Index mais alto que Mirror |
DeepSWE v1.1 | 73% | 40% | Codex tem uma pontuação mais alta em DeepSWE v1.1 que Mirror |
Terminal-Bench 4.0 | 55% | 4% | Codex tem uma pontuação mais alta em Terminal-Bench 4.0 que Mirror |
SWE-Atlas-QnA | 61% | 40% | Codex tem uma pontuação mais alta em SWE-Atlas-QnA que Mirror |
Custo por tarefa | US$ 1,04 | US$ 0,00 | Comparação não disponível |
Tempo por tarefa | 15,5 min | 42,4 min | Codex tem um tempo por tarefa mais baixo que Mirror |
Turnos por tarefa | 40,1 | 95,9 | Codex tem menos turnos por tarefa que Mirror |
Uso de tokens por tarefa | 3,2 mi | 5,1 mi | Codex tem um uso de tokens por tarefa mais baixo que Mirror |
Taxa de acertos de cache | 93% | 0,0% | Codex tem uma taxa de acertos de cache mais alta que Mirror |
Variantes de modelo
Variantes de modelo avaliadas para Codex e Mirror.
Variantes de modelo
| Codex | GPT-6.1 Sol (xhigh) | 63 | 73% | 55% | 61% | US$ 1,04 | 15,5 min | 3,2 mi |
| Codex | GPT-6 Astra (max) | 62 | 68% | 56% | 62% | US$ 7,47 | 29,4 min | 3,3 mi |
| Codex | GPT-6.1 Sol (medium) | 61 | 72% | 52% | 61% | US$ 0,70 | 10,9 min | 2,3 mi |
| Codex | GPT-6.1 Sol (high) | 60 | 71% | 50% | 60% | US$ 0,89 | 13,3 min | 2,8 mi |
| Codex | GPT-6.1 Sol (max) | 60 | 70% | 53% | 58% | US$ 1,55 | 24,4 min | 4 mi |
| Codex | GPT-6.1 Sol (low) | 57 | 68% | 49% | 55% | US$ 0,50 | 8,6 min | 1,7 mi |
| Codex | GPT-6 Sol (max) | 57 | 69% | 43% | 58% | US$ 2,99 | 22,3 min | 9,8 mi |
| Codex | GPT-5.6 Sol (max) | 55 | 72% | 37% | 54% | US$ 6,35 | 20,6 min | 10,2 mi |
| Codex | GPT-5.6 Luna (max) | 43 | 66% | 15% | 49% | US$ 0,44 | 23,5 min | 14,9 mi |
| Codex |  DeepSeek V4 Pro 0813 (max) | 43 | 57% | 10% | 62% | US$ 0,24 | 40,3 min | 24,2 mi |
| Codex | GPT-6 Luna (max) | 41 | 64% | 15% | 44% | US$ 0,18 | 21,4 min | 10,2 mi |
| Codex | DeepSeek V4 Flash 0731 (max) | 39 | 54% | 11% | 51% | US$ 0,09 | 18,3 min | 15,4 mi |
| Mirror | Beam 1.0 | 28 | 40% | 4% | 40% | US$ 0,00 | 42,4 min | 5,1 mi |
Desempenho
Desempenho no Artificial Analysis Coding Agent Index.
Artificial Analysis Coding Agent Index
Artificial Analysis Coding Agent Index v1.5 incorporates 3 benchmarks: DeepSWE v1.1, Terminal-Bench 4.0, and SWE-Atlas-QnA · Higher is better
Colorir por
Artificial Analysis Coding Agent Index vs. custo por tarefa
Artificial Analysis Coding Agent Index vs. média do custo da API de pagamento por token por tarefa (USD)
Colorir por
Most attractive quadrant
Uso de tokens
Consumo de tokens no Artificial Analysis Coding Agent Index.
Uso de tokens por tarefa
Média de tokens de entrada, cache e saída por tarefa
As taxas de acerto do cache de prompts podem variar significativamente conforme o roteamento do provedor, alterando materialmente o custo efetivo.
Artificial Analysis Coding Agent Index vs. tokens totais
Artificial Analysis Coding Agent Index vs. média de tokens totais por tarefa
Colorir por
Most attractive quadrant
Custo
Custo da API de pagamento por token no Artificial Analysis Coding Agent Index, com base nos preços atuais por token.
Custo por tarefa
Average pay-per-token API cost per task (USD) · Lower is better
Colorir por
Tempo de execução
Tempo de execução ativo do agente no Artificial Analysis Coding Agent Index.
Tempo por tarefa
Average agent wall time per task · Lower is better
Colorir por
Artificial Analysis Coding Agent Index vs. tempo de execução
Artificial Analysis Coding Agent Index vs. média do tempo de execução do agente por tarefa
Colorir por
Most attractive quadrant