IBM 모델: 지능, 성능 및 가격
Artificial Analysis Intelligence Index
* 추정치
Artificial Analysis는 IBM의 모델 13개를 벤치마크했습니다. 아래에서 이 모델들의 주요 지표를 비교합니다.
- 지능 부문에서 IBM의 최고 모델은 Granite 4.2 30B(15, 추정)입니다.
- 출력 속도가 가장 빠른 모델은 Granite 4.2 3B(216 토큰/초)입니다.
- 지연 시간 부문에서 첫 응답 토큰까지 걸리는 시간이 가장 짧은 모델은 Granite 4.2 3B(9.77초)입니다.
- 가격 부문에서 작업당 비용이 가장 낮은 모델은 Granite 4.2 3B($0.01)입니다. 모델 간 가격 차이는 최대 3.9배입니다.
지능
Artificial Analysis Intelligence Index
Intelligence Index vs. Cost per Intelligence Index Task
비용
Cost per Intelligence Index Task
속도 및 지연 시간
Output Speed
역량 점수
역량 지수
Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better
Incorporates 6 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better
Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AA-LCR v1.1, GDP.pdf, AutomationBench-AA · Higher is better
Incorporates 6 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, MLCR-AA, Humanity's Last Exam, AutomationBench-AA · Higher is better
Incorporates 6 evaluations: AA-Omniscience, Humanity's Last Exam, CritPt, GDPval-AA v2.1, AA-Briefcase v1.1, Terminal-Bench 4.0 · Higher is better
Incorporates 5 evaluations: AA-Omniscience, Humanity's Last Exam, GDPval-AA v2.1, AA-Briefcase v1.1, AA-LCR v1.1 · Higher is better
IBM의 모든 릴리스
Granite 4.2 30B
모델 1개
15
최고 지능 점수
Granite 4.2 3B
모델 1개
9
최고 지능 점수
Granite 4.2 8B
모델 1개
11
최고 지능 점수
Granite 4.1 30B
모델 1개
7
최고 지능 점수
Granite 4.1 3B
모델 1개
6
최고 지능 점수
Granite 4.1 8B
모델 1개
7
최고 지능 점수
Granite 4.0 350M
모델 1개
5
최고 지능 점수
Granite 4.0 H 350M
모델 1개
5
최고 지능 점수
Granite 4.0 H 1B
모델 1개
5
최고 지능 점수
Granite 4.0 1B
모델 1개
5
최고 지능 점수
Granite 4.0 H Small
모델 1개
6
최고 지능 점수
Granite 4.0 Micro
모델 1개
5
최고 지능 점수
Granite 3.3 8B
모델 1개
5
최고 지능 점수
상세 정보
웨이트 | 제공업체 벤치마크 | ||||||||
|---|---|---|---|---|---|---|---|---|---|
| Granite 4.2 30B | 15 | 30B | 131k | US$0.1 | 77 | ||||
| Granite 4.2 8B | 11 | 8B | 131k | US$0.0 | 76 | ||||
| Granite 4.2 3B | 9 | 3B | 131k | US$0.0 | 216 | ||||
| Granite 4.1 30B | 7 | 30B | 131k | - | - | - | |||
| Granite 4.1 8B | 7 | 8B | 131k | US$0.1 | 126 | ||||
| Granite 4.0 H Small | 6 | 32B 추론 시 9B 활성 | 128k | US$0.1 | 15 | ||||
| Granite 4.1 3B | 6 | 3B | 131k | - | - | - | |||
| Granite 4.0 H 1B | 5 | 1.5B | 128k | - | - | - | |||
| Granite 4.0 Micro | 5 | 3B | 128k | - | - | - | |||
| Granite 4.0 1B | 5 | 1.6B | 128k | - | - | - | |||
| Granite 3.3 8B (Non-reasoning) | 5 | 8.2B | 128k | US$0.1 | 15 | ||||
| Granite 4.0 350M | 5 | 0.3B | 33k | - | - | - | |||
| Granite 4.0 H 350M | 5 | 0.3B | 33k | - | - | - |