すべてのリリース•

13個のモデル

IBMのモデル:知能・性能・料金

Artificial AnalysisはIBMの13個のモデルをベンチマークしています。以下では、これらのモデルの主要指標を比較します。

  • 知能が最も高いIBMのモデルはGranite 4.2 8B(5)です。
  • 速度では、タスクあたりの時間が最も短いモデルはGranite 4.2 8B(13.2分)です。
  • 最初の回答トークンまでの時間が最も短いモデルはGranite 4.2 8B(82.04秒)です。
  • タスクあたりの費用が最も低いモデルはGranite 4.2 8B($0.04)です。

知能Updated

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v5.0.1 incorporates 9 evaluations: AA-Briefcase v1.1, AutomationBench-AA, Terminal-Bench 4.0, FrontierCode 2.0, AA-Omniscience v1.1, GDP.pdf, HLE-Diamond, CritPt v2 (Hard Subset), and Terminal-Bench-Science 0.1

Intelligence Index とタスクあたりのコスト

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task
Most attractive quadrant

費用

Intelligence Index タスクあたりのコスト

Weighted average cost (USD) per Intelligence Index task · Segmented by token type · Lower is better

速度と遅延

Intelligence Indexのタスクあたりの時間

Output tokens divided by end-to-end output speed (minutes per Intelligence Index task) · Speed at the model's own endpoint or the median across providers · Lower is better

能力スコア

能力指数

特定の能力や業界におけるモデルの性能を測定
Finance & Accounting Index

Incorporates 5 evaluations: AA-Briefcase v1.1, AA-Omniscience v1.1, HLE-Diamond, AutomationBench-AA, GDP.pdf · Higher is better

Strategy & Ops Index

Incorporates 4 evaluations: AutomationBench-AA, AA-Briefcase v1.1, AA-Omniscience v1.1, GDP.pdf · Higher is better

Legal Index

Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf, AutomationBench-AA · Higher is better

Healthcare & Medical Index

Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, MLCR-AA, AutomationBench-AA, HLE-Diamond · Higher is better

No data available
Engineering Index

Incorporates 7 evaluations: AA-Omniscience v1.1, CritPt v2 (Hard Subset), Terminal-Bench-Science 0.1, HLE-Diamond, Terminal-Bench 4.0, FrontierCode 2.0, AA-Briefcase v1.1 · Higher is better

Economics Index

Incorporates 4 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf · Higher is better

IBMのすべてのリリース

詳細

ウェイト
プロバイダーのベンチマーク
Granite 4.2 8B
IBMのロゴIBM
5
8B
131k
$0.0
13.2
65
CoreWeaveDeepInfra
Granite 4.2 3B
IBMのロゴIBM
5
3B
131k
-
-
-
-
Granite 4.2 30B
IBMのロゴIBM
-
30B
131k
-
-
-
-
Granite 4.0 Micro
IBMのロゴIBM
-
3B
128k
-
-
-
-
Granite 3.3 8B (Non-reasoning)
IBMのロゴIBM
-
8.2B
128k
-
-
-
-
Granite 4.0 350M
IBMのロゴIBM
-
0.3B
33k
-
-
-
-
Granite 4.0 H Small
IBMのロゴIBM
-
32B
推論時に9Bが有効
128k
-
-
-
-
Granite 4.1 8B
IBMのロゴIBM
-
8B
131k
-
-
-
-
Granite 4.1 3B
IBMのロゴIBM
-
3B
131k
-
-
-
-
Granite 4.0 1B
IBMのロゴIBM
-
1.6B
128k
-
-
-
-
Granite 4.0 H 350M
IBMのロゴIBM
-
0.3B
33k
-
-
-
-
Granite 4.1 30B
IBMのロゴIBM
-
30B
131k
-
-
-
-
Granite 4.0 H 1B
IBMのロゴIBM
-
1.5B
128k
-
-
-
-