Alle Veröffentlichungen

Hermes 4 - Llama-3.1 70B vs. gpt-oss-20b: Vergleich der Veröffentlichungen

Vergleich der Veröffentlichungen Hermes 4 - Llama-3.1 70B und gpt-oss-20b: 2 bzw. 2 Modelle mit unterschiedlichen Eigenschaften bei Intelligenz, Leistung und Preis. Unten werden die wichtigsten Kennzahlen aller 4 Modelle verglichen.

  • Bei der Intelligenz liegt gpt-oss-20b vorn: gpt-oss-20b (Low) mit 10, gegenüber Hermes 4 - Llama-3.1 70B (Reasoning) mit 8 bei Hermes 4 - Llama-3.1 70B.
Modell-Playground

Verglichene Veröffentlichungen

gpt-oss-20b (low)gpt-oss-20b (high)Hermes 4 70BHermes 4 70B (non-reasoning)
Intelligence Index
10*
9
8*
7*
Finanzen und Rechnungswesen
--
7
--
--
Strategie und Betrieb
--
5
--
--
Recht
--
7
--
--
Gesundheit und Medizin
--
7
--
--
Kosten pro AufgabeUSD
--
$0.01
--
--
AusgabegeschwindigkeitTokens/s
299
230
--
--
Zeit bis zum ersten Tokens
0,74
0,70
--
--
Kontextfenster
131k
131k
128k
128k
Modellentwickler
OpenAI
OpenAI
Nous Research
Nous Research
Lizenz
Offen
Offen
Offen
Offen
Eingabemodalität

Unterstützt: Text

Unterstützt: Text

Unterstützt: Text

Unterstützt: Text

Ausgabemodalität

Unterstützt: Text

Unterstützt: Text

Unterstützt: Text

Unterstützt: Text

Anbieter
--
--

* Geschätzt

Artificial Analysis Intelligence Index · Higher is better
Output tokens per second · Higher is better
Weighted average cost (USD) per Intelligence Index task · Lower is better

Intelligenz

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v4.3.2 incorporates 10 evaluations: AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1
Estimate (independent evaluation forthcoming)

Intelligence Index vs. Kosten pro Aufgabe des Intelligence Index

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task
Most attractive quadrant
Pareto line

Kosten pro Aufgabe (USD, logarithmische Skala)

Kosten

Kosten pro Aufgabe des Intelligence Index

Weighted average cost (USD) per Artificial Analysis Intelligence Index task, segmented by token type. Lower is better

Geschwindigkeit und Latenz

Ausgabegeschwindigkeit

Output tokens per second · Higher is better

Fähigkeitswerte

Fähigkeitsindizes

Misst die Leistung von Modellen bei bestimmten Fähigkeiten und in bestimmten Branchen
Finance & Accounting Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Strategy & Ops Index

Incorporates 6 evaluations: GDPval-AA v2.1, AA-Briefcase v1.1, AA-Omniscience, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Legal Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AA-LCR v1.1, GDP.pdf, AutomationBench-AA · Higher is better

Healthcare & Medical Index

Incorporates 6 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, MLCR-AA, Humanity's Last Exam, AutomationBench-AA · Higher is better

Engineering Index

Incorporates 6 evaluations: AA-Omniscience, Humanity's Last Exam, CritPt, GDPval-AA v2.1, AA-Briefcase v1.1, Terminal-Bench 4.0 · Higher is better

Economics Index

Incorporates 5 evaluations: AA-Omniscience, Humanity's Last Exam, GDPval-AA v2.1, AA-Briefcase v1.1, AA-LCR v1.1 · Higher is better