Groq: Intelligenz, Leistung und Preise der Modelle

Groq
Groq

Diese Analyse soll Sie bei der Auswahl des besten von Groq angebotenen Modells für Ihren Anwendungsfall unterstützen.

Höchste Intelligenz

Updated
#1
gpt-oss-120b (high)gpt-oss-120b (high)
12
#2
gpt-oss-120b (low)gpt-oss-120b (low)
10
#3
gpt-oss-20b (low)gpt-oss-20b (low)
10
#4
gpt-oss-20b (high)gpt-oss-20b (high)
9
#5
Llama 3.3 70BLlama 3.3 70B
8

Intelligence Index

Insgesamt 6 Modelle

Am schnellsten

#1
gpt-oss-20b (high)gpt-oss-20b (high)
918 t/s
#2
gpt-oss-20b (low)gpt-oss-20b (low)
910 t/s
#3
Llama 3.1 8BLlama 3.1 8B
617 t/s
#4
gpt-oss-120b (high)gpt-oss-120b (high)
473 t/s
#5
gpt-oss-120b (low)gpt-oss-120b (low)
472 t/s

Ausgabegeschwindigkeit

Insgesamt 6 Modelle

Niedrigster Preis

#1
Llama 3.1 8BLlama 3.1 8B
$0.05
#2
gpt-oss-20b (low)gpt-oss-20b (low)
$0.10
#3
gpt-oss-20b (high)gpt-oss-20b (high)
$0.10
#4
gpt-oss-120b (high)gpt-oss-120b (high)
$0.14
#5
gpt-oss-120b (low)gpt-oss-120b (low)
$0.20

Mischpreis (pro 1 Mio. Tokens)

Insgesamt 6 Modelle

Groq bietet 6 Modelle mit jeweils unterschiedlichen Merkmalen bei Intelligenz, Leistung und Preis an. Nachfolgend werden die wichtigsten Metriken der Modelle verglichen.

  • Bei der Intelligenz sind gpt-oss-120b (high) (12), gpt-oss-120b (low) (10) und gpt-oss-20b (low) (10) die führenden Modelle von Groq.
  • Bei der Ausgabegeschwindigkeit sind gpt-oss-20b (high) (918 t/s), gpt-oss-20b (low) (910 t/s) und Llama 3.1 8B (617 t/s) am schnellsten. Die Geschwindigkeit unterscheidet sich deutlich zwischen den Modellen; der Unterschied zwischen dem schnellsten und dem langsamsten beträgt 94 %.
  • Bei der Latenz bieten Llama 3.1 8B (0.80 s), Llama 3.3 70B (0.81 s) und gpt-oss-20b (high) (2.93 s) die kürzeste Zeit bis zum ersten Antworttoken.
  • Beim Preis bieten Llama 3.1 8B ($0.05), gpt-oss-20b (low) ($0.10) und gpt-oss-20b (high) ($0.10) die niedrigsten Mischpreise pro 1 Mio. Tokens. Die Preise unterscheiden sich zwischen den Modellen bis zum 3.7-Fachen.
  • Bei der Größe des Kontextfensters unterstützen gpt-oss-120b (high) (131k), gpt-oss-120b (low) (131k) und gpt-oss-20b (low) (131k) die größten Kontextfenster von Groq.
Updated
Artificial Analysis Intelligence Index · Higher is better
Output tokens per second · Higher is better
USD per 1M tokens (blended) · Lower is better

Intelligenzevaluationen

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v4.3.2 incorporates 10 evaluations: AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1
Estimate (independent evaluation forthcoming)

Intelligence Evaluations

Intelligence evaluations measured independently by Artificial Analysis · Higher is better
Mehr anzeigen

Agentic knowledge work, (Elo-500)/2000

Agentic real-world work tasks, (Elo-500)/2000

Agentic SaaS workflows

Agentic coding & terminal use

SciCodeUnder review

Coding

Reasoning & knowledge

Professional document reasoning, All-pass

CritPtUnder review

Physics reasoning

Long context reasoning

Legal agentic work, criterion pass rate

Agentic business operations

Agentic scientific research workflows in a terminal

No data available

Quantitative analysis on spreadsheets & documents

No data available

Kubernetes incident root-cause analysis

Visual reasoning

No data available

Medical long context reasoning

Intelligence Index vs. Preis

Blended at 7:2:1 (cache-input-output) · USD per 1M tokens (blended)
Most attractive quadrant
Pareto line

Kontextfenster

Kontextfenster

Context window: tokens limit · Higher is better

Preise

Intelligence Index vs. Preis

Blended at 7:2:1 (cache-input-output) · USD per 1M tokens (blended)
Most attractive quadrant
Pareto line

Leistungsübersicht

Ausgabegeschwindigkeit vs. Preis

Output speed: output tokens per second · USD per 1M tokens (blended)
Most attractive quadrant
Pareto line

Geschwindigkeit

Gemessen anhand der Ausgabegeschwindigkeit (Tokens pro Sekunde)

Ausgabegeschwindigkeit

Output tokens per second · Higher is better

Latenz

Gemessen anhand der Zeit (Sekunden) bis zum ersten Token

Latenz: Zeit bis zum ersten Antworttoken

Sekunden bis zum ersten Antwort-Token · Berücksichtigt die „Denkzeit“ von Reasoning-Modellen

Ende-zu-Ende-Antwortzeit

Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed

Ende-zu-Ende-Antwortzeit vs. Preis

End-to-end response time: end-to-end seconds to output 500 tokens · USD per 1M tokens (blended)
Most attractive quadrant

Weitere Analyse
Logo von OpenAI
gpt-oss-120b (high)
131k
Offen
12
--
471
0.74
6.04
4.24
Logo von OpenAI
gpt-oss-120b (low)
131k
Offen
10*
--
472
0.77
6.06
4.23
Logo von OpenAI
gpt-oss-20b (low)
131k
Offen
10*
--
918
0.82
3.54
2.18
Logo von OpenAI
gpt-oss-20b (high)
131k
Offen
9
$0.02
943
0.80
3.45
2.12
Logo von Meta
Llama 3.3 70B
131k
Offen
8*
--
304
0.84
2.49
--
Logo von Meta
Llama 3.1 8B
131k
Offen
7*
--
645
0.90
1.68
--

Wichtige Definitionen

Häufig gestellte Fragen

Häufige Fragen zu Groq