모든 릴리스•

모델 13개

IBM 모델: 지능, 성능 및 가격

Artificial Analysis는 IBM의 모델 13개를 벤치마크했습니다. 아래에서 이 모델들의 주요 지표를 비교합니다.

  • 지능 부문에서 IBM의 최고 모델은 Granite 4.2 30B(15, 추정)입니다.
  • 출력 속도가 가장 빠른 모델은 Granite 4.2 3B(216 토큰/초)입니다.
  • 지연 시간 부문에서 첫 응답 토큰까지 걸리는 시간이 가장 짧은 모델은 Granite 4.2 3B(9.77초)입니다.
  • 가격 부문에서 작업당 비용이 가장 낮은 모델은 Granite 4.2 3B($0.01)입니다. 모델 간 가격 차이는 최대 3.9배입니다.

지능

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v4.3.2 incorporates 10 evaluations: AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1
Estimate (independent evaluation forthcoming)

Intelligence Index vs. Cost per Intelligence Index Task

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task
Most attractive quadrant
Pareto line

비용

Cost per Intelligence Index Task

Weighted average cost (USD) per Artificial Analysis Intelligence Index task, segmented by token type. Lower is better

속도 및 지연 시간

Output Speed

Output tokens per second · Higher is better

역량 점수

역량 지수

특정 역량 및 산업에서 모델의 성능을 측정
Finance & Accounting Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Strategy & Ops Index

Incorporates 6 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Legal Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AA-LCR v1.1, GDP.pdf, AutomationBench-AA · Higher is better

Healthcare & Medical Index

Incorporates 6 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, MLCR-AA, Humanity's Last Exam, AutomationBench-AA · Higher is better

No data available
Engineering Index

Incorporates 6 evaluations: AA-Omniscience, Humanity's Last Exam, CritPt, GDPval-AA v2.1, AA-Briefcase v1.1, Terminal-Bench 4.0 · Higher is better

Economics Index

Incorporates 5 evaluations: AA-Omniscience, Humanity's Last Exam, GDPval-AA v2.1, AA-Briefcase v1.1, AA-LCR v1.1 · Higher is better

IBM의 모든 릴리스

상세 정보

웨이트
제공업체 벤치마크
Granite 4.2 30B
IBM 로고IBM
15
30B
131k
US$0.1
77
DeepInfra
Granite 4.2 8B
IBM 로고IBM
11
8B
131k
US$0.0
76
CoreWeaveDeepInfra
Granite 4.2 3B
IBM 로고IBM
9
3B
131k
US$0.0
216
DeepInfra
Granite 4.1 30B
IBM 로고IBM
7
30B
131k
-
-
-
Granite 4.1 8B
IBM 로고IBM
7
8B
131k
US$0.1
126
CoreWeave
Granite 4.0 H Small
IBM 로고IBM
6
32B
추론 시 9B 활성
128k
US$0.1
15
Replicate
Granite 4.1 3B
IBM 로고IBM
6
3B
131k
-
-
-
Granite 4.0 H 1B
IBM 로고IBM
5
1.5B
128k
-
-
-
Granite 4.0 Micro
IBM 로고IBM
5
3B
128k
-
-
-
Granite 4.0 1B
IBM 로고IBM
5
1.6B
128k
-
-
-
Granite 3.3 8B (Non-reasoning)
IBM 로고IBM
5
8.2B
128k
US$0.1
15
Replicate
Granite 4.0 350M
IBM 로고IBM
5
0.3B
33k
-
-
-
Granite 4.0 H 350M
IBM 로고IBM
5
0.3B
33k
-
-
-