Nous Researchのモデル:知能・性能・料金
Artificial Analysis Intelligence Index
Artificial AnalysisはNous Researchの7個のモデルをベンチマークしています。以下では、これらのモデルの主要指標を比較します。
- 最初の回答トークンまでの時間が最も短いモデルはHermes 4 - Llama-3.1 405B (Non-reasoning)(5.27秒)です。
知能
Artificial Analysis Intelligence Index
Intelligence Index とタスクあたりのコスト
費用
Intelligence Index タスクあたりのコスト
速度と遅延
Intelligence Indexのタスクあたりの時間
能力スコア
能力指数
Incorporates 5 evaluations: AA-Briefcase v1.1, AA-Omniscience v1.1, HLE-Diamond, AutomationBench-AA, GDP.pdf · Higher is better
Incorporates 4 evaluations: AutomationBench-AA, AA-Briefcase v1.1, AA-Omniscience v1.1, GDP.pdf · Higher is better
Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf, AutomationBench-AA · Higher is better
Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, MLCR-AA, AutomationBench-AA, HLE-Diamond · Higher is better
Incorporates 7 evaluations: AA-Omniscience v1.1, CritPt v2 (Hard Subset), Terminal-Bench-Science 0.1, HLE-Diamond, Terminal-Bench 4.0, FrontierCode 2.0, AA-Briefcase v1.1 · Higher is better
Incorporates 4 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf · Higher is better
Nous Researchのすべてのリリース
詳細
ウェイト | プロバイダーのベンチマーク | |||||||||
|---|---|---|---|---|---|---|---|---|---|---|
| Hermes 3 - Llama-3.1 70B | - | 70.6B | 128k | $0.7 | - | 102 | ||||
| Hermes 4 - Llama-3.1 70B (Non-reasoning) | - | 70.6B | 128k | - | - | - | - | |||
| Hermes 4 - Llama-3.1 70B (Reasoning) | - | 70.6B | 128k | - | - | - | - | |||
| Hermes 4 - Llama-3.1 405B (Reasoning) | - | 406B | 128k | $1.2 | - | 21 | ||||
| DeepHermes 3 - Mistral 24B Preview (Non-reasoning) | - | 24B | 32k | - | - | - | - | |||
| DeepHermes 3 - Llama-3.1 8B Preview (Non-reasoning) | - | 8B | 128k | - | - | - | - | |||
| Hermes 4 - Llama-3.1 405B (Non-reasoning) | - | 406B | 128k | $1.2 | - | 21 |
