Codex vs. Mirror
Artificial Analysis Coding Agent Index의 벤치마크 점수, 비용, 실행 시간, 토큰 사용량을 기준으로 Codex 및 Mirror를 비교합니다.
방법론에 관한 자세한 내용은 방법론 페이지를 참조하세요.
다른 비교 살펴보기
vs
비교
Codex 및 Mirror의 나란히 비교.
코딩 에이전트 비교
지표 |  CodexGPT-6 Astra (Max) |  MirrorBeam 1.0 | 분석 |
|---|---|---|---|
에이전트 하네스 | Codex | Mirror | |
대표 모델 | GPT-6 Astra (Max) | Beam 1.0 | |
Coding Agent Index | 55 | 20 | Codex의 Coding Agent Index가 Mirror보다 높습니다 |
FrontierCode v1.1 | 49% | 20% | Codex의 FrontierCode v1.1 점수가 Mirror보다 높습니다 |
Terminal-Bench 4.0 | 56% | 4% | Codex의 Terminal-Bench 4.0 점수가 Mirror보다 높습니다 |
SWE-Atlas-QnA-AA | 59% | 38% | Codex의 SWE-Atlas-QnA-AA 점수가 Mirror보다 높습니다 |
작업당 비용 | US$7.04 | US$0.32 | Mirror의 작업당 비용이 Codex보다 낮습니다 |
작업당 시간 | 24.8분 | 38.7분 | Codex의 작업당 시간이 Mirror보다 짧습니다 |
작업당 턴 | 39.4 | 93 | Codex의 작업당 턴이 Mirror보다 적습니다 |
작업당 토큰 사용량 | 3.23M | 4.89M | Codex의 작업당 토큰 사용량이 Mirror보다 적습니다 |
캐시 적중률 | 93% | 95% | Mirror의 캐시 적중률이 Codex보다 높습니다 |
모델 변형
Codex 및 Mirror의 평가된 모델 변형.
모델 변형
| Codex | GPT-6 Astra (Max) | max | 55 | 49% | 56% | 59% | US$7.04 | 24.8분 | 3.23M |
| Codex | GPT-6.1 Sol (Max) | max | 54 | 49% | 53% | 60% | US$1.50 | 23.7분 | 3.94M |
| Codex | GPT-6.1 Terra (Xhigh) | xhigh | 48 | 45% | 46% | 54% | US$0.69 | 16.4분 | 6.89M |
| Codex | GPT-6.1 Terra (Max) | max | 48 | 42% | 48% | 54% | US$1.24 | 26.1분 | 12.3M |
| Codex |  DeepSeek V4.1 Flash (Max) | max | 47 | 53% | 28% | 61% | US$0.39 | 38.1분 | 27.2M |
| Codex | GPT-6.1 Terra (High) | high | 46 | 43% | 42% | 53% | US$0.54 | 12.7분 | 5.6M |
| Codex | GPT-6.1 Terra (Medium) | medium | 42 | 44% | 35% | 47% | US$0.39 | 10.2분 | 4.08M |
| Codex | GPT-6.1 Terra (Non-reasoning) | non-reasoning | 39 | 46% | 25% | 46% | US$0.45 | 9.5분 | 5.78M |
| Codex | GPT-6.1 Terra (Low) | low | 35 | 41% | 25% | 39% | US$0.20 | 6.3분 | 1.89M |
| Codex | GPT-6 Luna (Max) | max | 31 | 40% | 16% | 38% | US$0.16 | 21.3분 | 8.89M |
| Mirror | Beam 1.0 | reasoning | 20 | 20% | 4% | 38% | US$0.32 | 38.7분 | 4.89M |
성능
Artificial Analysis Coding Agent Index 전반의 성능.
Artificial Analysis Coding Agent Index
Artificial Analysis Coding Agent Index v2.0 incorporates 3 benchmarks: FrontierCode v1.1, Terminal-Bench 4.0, and SWE-Atlas-QnA-AA · Higher is better
색상 기준
Artificial Analysis Coding Agent Index vs. 작업당 비용
Artificial Analysis Coding Agent Index vs. 작업당 평균 토큰당 종량제 API 비용 (USD)
색상 기준
Most attractive quadrant
Pareto line
토큰 사용량
Artificial Analysis Coding Agent Index 전반의 토큰 소비량.
작업당 토큰 사용량
작업당 평균 입력·캐시·출력 토큰
프롬프트 캐시 적중률은 제공업체 라우팅에 따라 크게 달라질 수 있으며, 이에 따라 실제 비용도 크게 달라질 수 있습니다.
Artificial Analysis Coding Agent Index vs. 총 토큰
Artificial Analysis Coding Agent Index vs. 작업당 평균 총 토큰
색상 기준
Most attractive quadrant
비용
현재 토큰당 가격을 기준으로 한 Artificial Analysis Coding Agent Index의 토큰당 종량제 API 비용.
작업당 비용
Average pay-per-token API cost per task (USD) · Lower is better
색상 기준
실행 시간
Artificial Analysis Coding Agent Index 전반의 활성 에이전트 실행 시간.
작업당 시간
Average agent wall time per task · Lower is better
색상 기준
Artificial Analysis Coding Agent Index vs. 실행 시간
Artificial Analysis Coding Agent Index vs. 작업당 평균 에이전트 실행 시간
색상 기준
Most attractive quadrant