すべてのリリース

Kimi K3 vs. Hermes 4 - Llama-3.1 405B：リリース比較

Kimi K3とHermes 4 - Llama-3.1 405Bのリリース比較：それぞれ2個と2個のモデルがあり、知能・性能・料金の特性が異なります。以下では、全4個のモデルの主要指標を比較します。

  • 知能が最も高いのはKimi K3です。Kimi K3 (Max)（44）に対し、Hermes 4 - Llama-3.1 405BはHermes 4 - Llama-3.1 405B (Reasoning)（7）です。
  • 出力速度が最も速いのはKimi K3です。Kimi K3 (Low)（43トークン/秒）に対し、Hermes 4 - Llama-3.1 405BはHermes 4 - Llama-3.1 405B (Reasoning)（40トークン/秒）です。
モデルPlayground

比較するリリース

Kimi K3 (max)Kimi K3 (low)Hermes 4 405BHermes 4 405B (non-reasoning)
Intelligence Index
44
30
7*
7*
財務・会計
47
32
--
--
戦略・オペレーション
50
39
--
--
法務
49
34
--
--
医療・ヘルスケア
45
--
--
--
タスクあたりの費用USD
$2.00
$1.15
--
--
出力速度トークン/秒
42
43
40
37
最初のトークンまでの時間秒
3.23
3.24
2.36
2.33
コンテキストウィンドウ
1M
1M
128k
128k
開発元
Kimi
Kimi
Nous Research
Nous Research
ライセンス
オープン
オープン
オープン
オープン
入力モダリティ

対応：テキスト、画像

対応：テキスト、画像

対応：テキスト

対応：テキスト

出力モダリティ

対応：テキスト

対応：テキスト

対応：テキスト

対応：テキスト

プロバイダー
DatabricksFireworksModal
+10
KimiBasetenDatabricks
+2
Nebius
Nebius

* 推定値

知能

Artificial Analysis Intelligence Index · Higher is better

速度

Output tokens per second · Higher is better

タスクあたりの費用

Weighted average cost (USD) per Intelligence Index task · Lower is better

知能

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v4.3.2 incorporates 10 evaluations: AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1
Estimate (independent evaluation forthcoming)

Intelligence Index とタスクあたりのコスト

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task
Most attractive quadrant
Kimi K3
Pareto line
AA-Briefcase v1.1
GDPval-AA v2.1

タスク当たりのコスト（USD、対数スケール）

費用

Intelligence Index タスクあたりのコスト

Weighted average cost (USD) per Artificial Analysis Intelligence Index task, segmented by token type. Lower is better

速度と遅延

出力速度

Output tokens per second · Higher is better

能力スコア

能力指数

特定の能力や業界におけるモデルの性能を測定
Finance & Accounting Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Strategy & Ops Index

Incorporates 6 evaluations: GDPval-AA v2.1, AA-Briefcase v1.1, AA-Omniscience, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Legal Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AA-LCR v1.1, GDP.pdf, AutomationBench-AA · Higher is better

Healthcare & Medical Index

Incorporates 6 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, MLCR-AA, Humanity's Last Exam, AutomationBench-AA · Higher is better

Engineering Index

Incorporates 6 evaluations: AA-Omniscience, Humanity's Last Exam, CritPt, GDPval-AA v2.1, AA-Briefcase v1.1, Terminal-Bench 4.0 · Higher is better

Economics Index

Incorporates 5 evaluations: AA-Omniscience, Humanity's Last Exam, GDPval-AA v2.1, AA-Briefcase v1.1, AA-LCR v1.1 · Higher is better