Kimi Code CLI vs. Mirror

Comparação entre Kimi Code CLI e Mirror no Artificial Analysis Coding Agent Index, incluindo pontuações de benchmarks, custo, tempo de execução e uso de tokens.

Para saber mais sobre nossa metodologia, consulte a página de metodologia.

Explore outras comparações
vs
Artificial Analysis Coding Agent Index v1.5 · Higher is better
Average agent wall time per task · Lower is better
Average API cost per task (USD) · Lower is better

Comparação

Comparação lado a lado de Kimi Code CLI e Mirror.

Comparação de agentes de programação

Métrica
Kimi Code CLI
Kimi K3
Mirror
Beam 1.0
Análise
Harness do agente
Kimi Code CLI
Mirror
Modelo representativo
Kimi K3
Beam 1.0
Coding Agent Index
52
28
Kimi Code CLI tem um Coding Agent Index mais alto que Mirror
DeepSWE v1.1
68%
40%
Kimi Code CLI tem uma pontuação mais alta em DeepSWE v1.1 que Mirror
Terminal-Bench 4.0
21%
4%
Kimi Code CLI tem uma pontuação mais alta em Terminal-Bench 4.0 que Mirror
SWE-Atlas-QnA
66%
40%
Kimi Code CLI tem uma pontuação mais alta em SWE-Atlas-QnA que Mirror
Custo por tarefa
US$ 5,05
US$ 0,00
Comparação não disponível
Tempo por tarefa
1,0 h
42,4 min
Mirror tem um tempo por tarefa mais baixo que Kimi Code CLI
Turnos por tarefa
173,4
95,9
Mirror tem menos turnos por tarefa que Kimi Code CLI
Uso de tokens por tarefa
8,5 mi
5,1 mi
Mirror tem um uso de tokens por tarefa mais baixo que Kimi Code CLI
Taxa de acertos de cache
95%
0,0%
Kimi Code CLI tem uma taxa de acertos de cache mais alta que Mirror

Variantes de modelo

Variantes de modelo avaliadas para Kimi Code CLI e Mirror.

Variantes de modelo

Kimi Code CLI
Kimi K3
52
68%
21%
66%
US$ 5,05
1,0 h
8,5 mi
Mirror
Beam 1.0
28
40%
4%
40%
US$ 0,00
42,4 min
5,1 mi

Desempenho

Desempenho no Artificial Analysis Coding Agent Index.

Artificial Analysis Coding Agent Index

Artificial Analysis Coding Agent Index v1.5 incorporates 3 benchmarks: DeepSWE v1.1, Terminal-Bench 4.0, and SWE-Atlas-QnA · Higher is better

Artificial Analysis Coding Agent Index vs. custo por tarefa

Artificial Analysis Coding Agent Index vs. média do custo da API de pagamento por token por tarefa (USD)
Most attractive quadrant

Uso de tokens

Consumo de tokens no Artificial Analysis Coding Agent Index.

Uso de tokens por tarefa

Média de tokens de entrada, cache e saída por tarefa
As taxas de acerto do cache de prompts podem variar significativamente conforme o roteamento do provedor, alterando materialmente o custo efetivo.

Artificial Analysis Coding Agent Index vs. tokens totais

Artificial Analysis Coding Agent Index vs. média de tokens totais por tarefa
Most attractive quadrant

Custo

Custo da API de pagamento por token no Artificial Analysis Coding Agent Index, com base nos preços atuais por token.

Custo por tarefa

Average pay-per-token API cost per task (USD) · Lower is better

Tempo de execução

Tempo de execução ativo do agente no Artificial Analysis Coding Agent Index.

Tempo por tarefa

Average agent wall time per task · Lower is better

Artificial Analysis Coding Agent Index vs. tempo de execução

Artificial Analysis Coding Agent Index vs. média do tempo de execução do agente por tarefa
Most attractive quadrant