Nous Researchのモデル：知能・性能・料金
Artificial AnalysisはNous Researchの7個のモデルをベンチマークしています。以下では、これらのモデルの主要指標を比較します。
- 知能が最も高いNous ResearchのモデルはHermes 4 - Llama-3.1 70B (Reasoning)（8、推定）です。
- 出力速度が最も速いモデルはHermes 4 - Llama-3.1 405B (Reasoning)（43トークン/秒）です。
- 最初の回答トークンまでの時間が最も短いモデルはHermes 4 - Llama-3.1 405B (Non-reasoning)（2.31秒）です。
知能
Artificial Analysis Intelligence Index
Intelligence Index vs. Cost per Intelligence Index Task
費用
Cost per Intelligence Index Task
速度と遅延
Output Speed
能力スコア
能力指数
Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better
Incorporates 6 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better
Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AA-LCR v1.1, GDP.pdf, AutomationBench-AA · Higher is better
Incorporates 6 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, MLCR-AA, Humanity's Last Exam, AutomationBench-AA · Higher is better
Incorporates 6 evaluations: AA-Omniscience, Humanity's Last Exam, CritPt, GDPval-AA v2.1, AA-Briefcase v1.1, Terminal-Bench 4.0 · Higher is better
Incorporates 5 evaluations: AA-Omniscience, Humanity's Last Exam, GDPval-AA v2.1, AA-Briefcase v1.1, AA-LCR v1.1 · Higher is better
Nous Researchのすべてのリリース
詳細
ウェイト | プロバイダーのベンチマーク | ||||||||
|---|---|---|---|---|---|---|---|---|---|
| Hermes 4 - Llama-3.1 70B (Reasoning) |  Nous Research | 8 | 70.6B | 128k | - | - | - | ||
| Hermes 4 - Llama-3.1 405B (Reasoning) | Nous Research | 7 | 406B | 128k | $1.2 | 43 |  | ||
| Hermes 4 - Llama-3.1 405B (Non-reasoning) | Nous Research | 7 | 406B | 128k | $1.2 | 43 | | ||
| Hermes 4 - Llama-3.1 70B (Non-reasoning) | Nous Research | 7 | 70.6B | 128k | - | - | - | ||
| DeepHermes 3 - Mistral 24B Preview (Non-reasoning) | Nous Research | 6 | 24B | 32k | - | - | - | ||
| Hermes 3 - Llama-3.1 70B | Nous Research | 6 | 70.6B | 128k | $0.7 | 30 |  | ||
| DeepHermes 3 - Llama-3.1 8B Preview (Non-reasoning) | Nous Research | 5 | 8B | 128k | - | - | - |