Alle Veröffentlichungen

Mistral Small 4 vs. Hermes 4 - Llama-3.1 405B: Vergleich der Veröffentlichungen

Vergleich der Veröffentlichungen Mistral Small 4 und Hermes 4 - Llama-3.1 405B: 2 bzw. 2 Modelle mit unterschiedlichen Eigenschaften bei Intelligenz, Leistung und Preis. Unten werden die wichtigsten Kennzahlen aller 4 Modelle verglichen.

  • Bei der Ausgabegeschwindigkeit ist Mistral Small 4 am schnellsten: Mistral Small 4 (Reasoning) mit 172 Tokens/s, gegenüber Hermes 4 - Llama-3.1 405B (Reasoning) mit 40 Tokens/s bei Hermes 4 - Llama-3.1 405B.
Modell-Playground

Verglichene Veröffentlichungen

Mistral Small 4Mistral Small 4 (non-reasoning)Hermes 4 405BHermes 4 405B (non-reasoning)
Intelligence Index
4
--
--
--
Finanzen und Rechnungswesen
12
--
--
--
Strategie und Betrieb
7
--
--
--
Recht
12
--
--
--
Gesundheit und Medizin
9
--
--
--
Kosten pro AufgabeUSD
$0.04
--
--
--
AusgabegeschwindigkeitTokens/s
172
162
40
38
Zeit bis zum ersten Tokens
0,83
0,88
2,38
2,34
Kontextfenster
256k
256k
128k
128k
Modellentwickler
Mistral
Mistral
Nous Research
Nous Research
Lizenz
Offen
Offen
Offen
Offen
Eingabemodalität

Unterstützt: Text und Bilder

Unterstützt: Text und Bilder

Unterstützt: Text

Unterstützt: Text

Ausgabemodalität

Unterstützt: Text

Unterstützt: Text

Unterstützt: Text

Unterstützt: Text

Anbieter
Mistral
Mistral
Nebius
Nebius
Updated
Artificial Analysis Intelligence Index · Higher is better
Output tokens per second · Higher is better
Weighted average cost (USD) per Intelligence Index task · Lower is better

IntelligenzUpdated

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v5.0 incorporates 9 evaluations: AA-Briefcase v1.1, AutomationBench-AA, Terminal-Bench 4.0, FrontierCode 2.0, AA-Omniscience v1.1, GDP.pdf, HLE-Diamond, CritPt v2 (Hard Subset), and Terminal-Bench-Science 0.1

Intelligence Index vs. Kosten pro Aufgabe

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task
Most attractive quadrant
Pareto line

Kosten pro Aufgabe (USD, logarithmische Skala)

Kosten

Kosten pro Aufgabe des Intelligence Index

Weighted average cost (USD) per Intelligence Index task · Segmented by token type · Lower is better

Geschwindigkeit und Latenz

Ausgabegeschwindigkeit

Output tokens per second · Higher is better

Fähigkeitswerte

Fähigkeitsindizes

Misst die Leistung von Modellen bei bestimmten Fähigkeiten und in bestimmten Branchen
Finance & Accounting Index

Incorporates 5 evaluations: AA-Briefcase v1.1, AA-Omniscience v1.1, HLE-Diamond, AutomationBench-AA, GDP.pdf · Higher is better

Strategy & Ops Index

Incorporates 4 evaluations: AutomationBench-AA, AA-Briefcase v1.1, AA-Omniscience v1.1, GDP.pdf · Higher is better

Legal Index

Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf, AutomationBench-AA · Higher is better

Healthcare & Medical Index

Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, MLCR-AA, AutomationBench-AA, HLE-Diamond · Higher is better

Engineering Index

Incorporates 7 evaluations: AA-Omniscience v1.1, CritPt v2 (Hard Subset), Terminal-Bench-Science 0.1, HLE-Diamond, Terminal-Bench 4.0, FrontierCode 2.0, AA-Briefcase v1.1 · Higher is better

Economics Index

Incorporates 4 evaluations: AA-Briefcase v1.1, AA-Omniscience v1.1, HLE-Diamond, GDP.pdf · Higher is better