모든 릴리스•

모델 13개

IBM 모델: 지능, 성능 및 가격

Artificial Analysis는 IBM의 모델 13개를 벤치마크했습니다. 아래에서 이 모델들의 주요 지표를 비교합니다.

  • 지능 부문에서 IBM의 최고 모델은 Granite 4.2 30B(13)입니다.
  • 출력 속도가 가장 빠른 모델은 Granite 4.2 3B(218 토큰/초)입니다.
  • 지연 시간 부문에서 첫 응답 토큰까지 걸리는 시간이 가장 짧은 모델은 Granite 4.2 3B(9.68초)입니다.
  • 가격 부문에서 작업당 비용이 가장 낮은 모델은 Granite 4.2 3B($0.01)입니다. 모델 간 가격 차이는 최대 12배입니다.

지능

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v4.3.2 incorporates 10 evaluations: AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1
Estimate (independent evaluation forthcoming)

Intelligence Index와 작업당 비용

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task
Most attractive quadrant
Pareto line

비용

Intelligence Index 작업당 비용

Weighted average cost (USD) per Intelligence Index task · Segmented by token type · Lower is better

속도 및 지연 시간

출력 속도

Output tokens per second · Higher is better

역량 점수

역량 지수

특정 역량 및 산업에서 모델의 성능을 측정
Finance & Accounting Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Strategy & Ops Index

Incorporates 6 evaluations: GDPval-AA v2.1, AA-Briefcase v1.1, AA-Omniscience, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Legal Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AA-LCR v1.1, GDP.pdf, AutomationBench-AA · Higher is better

Healthcare & Medical Index

Incorporates 6 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, MLCR-AA, Humanity's Last Exam, AutomationBench-AA · Higher is better

No data available
Engineering Index

Incorporates 6 evaluations: AA-Omniscience, Humanity's Last Exam, CritPt, GDPval-AA v2.1, AA-Briefcase v1.1, Terminal-Bench 4.0 · Higher is better

Economics Index

Incorporates 5 evaluations: AA-Omniscience, Humanity's Last Exam, GDPval-AA v2.1, AA-Briefcase v1.1, AA-LCR v1.1 · Higher is better

IBM의 모든 릴리스

상세 정보

웨이트
제공업체 벤치마크
Granite 4.2 30B
IBM 로고IBM
13
30B
131k
US$0.1
77
DeepInfra
Granite 4.2 8B
IBM 로고IBM
11
8B
131k
US$0.0
128
CoreWeaveDeepInfra
Granite 4.2 3B
IBM 로고IBM
9
3B
131k
US$0.0
218
DeepInfra
Granite 4.1 30B
IBM 로고IBM
7
30B
131k
-
-
-
Granite 4.1 8B
IBM 로고IBM
7
8B
131k
-
-
-
Granite 4.0 H Small
IBM 로고IBM
6
32B
추론 시 9B 활성
128k
-
-
-
Granite 4.1 3B
IBM 로고IBM
6
3B
131k
-
-
-
Granite 4.0 H 1B
IBM 로고IBM
5
1.5B
128k
-
-
-
Granite 4.0 Micro
IBM 로고IBM
5
3B
128k
-
-
-
Granite 4.0 1B
IBM 로고IBM
5
1.6B
128k
-
-
-
Granite 3.3 8B (Non-reasoning)
IBM 로고IBM
5
8.2B
128k
US$0.1
9
Replicate
Granite 4.0 350M
IBM 로고IBM
5
0.3B
33k
-
-
-
Granite 4.0 H 350M
IBM 로고IBM
5
0.3B
33k
-
-
-