Open weights model

Released August 2025

gpt-oss-20b (high) Benchmarking und Analyse von API-Anbietern

Modellvergleich

Diese Analyse soll Sie bei der Auswahl des besten API-Anbieters von gpt-oss-20b (high) für Ihren Anwendungsfall unterstützen.

Am schnellsten

#1
GroqGroq
949.6 t/s
#2
Google VertexGoogle Vertex
406.9 t/s
#3
CoreWeaveCoreWeave
210.7 t/s
#4
NovitaNovita
200.4 t/s
#5
AmazonAmazon
137.1 t/s

Ausgabegeschwindigkeit

Insgesamt 9 Anbieter

Niedrigste Latenz

#1
GroqGroq
2.88 s
#2
Google VertexGoogle Vertex
5.27 s
#3
CoreWeaveCoreWeave
10.08 s
#4
NovitaNovita
11.14 s
#5
DeepInfraDeepInfra
17.76 s

Zeit bis zum ersten Antworttoken

Insgesamt 9 Anbieter

Niedrigster Preis

#1
CoreWeaveCoreWeave
$0.04
#2
DeepInfraDeepInfra
$0.04
#3
NovitaNovita
$0.05
#4
Lightning AILightning AI
$0.07
#5
Google VertexGoogle Vertex
$0.09

Mischpreis (pro 1 Mio. Tokens)

Insgesamt 9 Anbieter

gpt-oss-20b (high) ist über 9 API-Anbieter verfügbar, die jeweils unterschiedliche Leistungsmerkmale und Preise bieten. Im Folgenden werden die wichtigsten Metriken der Anbieter verglichen.

  • Bei der Ausgabegeschwindigkeit führen Groq (949.6 Tokens/s), Google Vertex (406.9 Tokens/s) und CoreWeave (210.7 Tokens/s). Die Geschwindigkeit unterscheidet sich erheblich zwischen den Anbietern: Der Unterschied zwischen dem schnellsten und langsamsten beträgt 722 %.
  • Bei der Latenz bieten Groq (2.88 s), Google Vertex (5.27 s) und CoreWeave (10.08 s) die niedrigste Zeit bis zum ersten Antworttoken.
  • Bei den Preisen bieten CoreWeave (0.04), DeepInfra (0.04) und Novita (0.05) die niedrigsten Mischpreise pro 1 Mio. Tokens. Die Preise unterscheiden sich je nach Anbieter bis zum 5.3-Fachen.
  • Groq bietet mit der höchsten Geschwindigkeit und der niedrigsten Latenz die beste Leistung. Für eine Kostenoptimierung bietet CoreWeave den konkurrenzfähigsten Preis.

Wichtigste Ergebnisse

Output tokens per second · Higher is better
Seconds · Lower is better
USD per 1M tokens (blended) · Lower is better

Aktualisierung: Der Standard-Workload für das Performance-Benchmarking wurde auf 10k Eingabetokens umgestellt, um Produktionsanwendungsfälle besser abzubilden. Oben können weiterhin andere Workloads ausgewählt werden.

Preise

Pricing: Cache Hit, Input, and Output

Price (USD per M Tokens) · Lower is better · 10,000 input tokens

Pricing: Blended Price

Blended at 7:2:1 (cache-input-output) · USD per 1M tokens (blended) · Lower is better

Output Speed vs. Price

Blended at 7:2:1 (cache-input-output) · Output speed: output tokens per second · USD per 1M tokens (blended)
Most attractive quadrant
Pareto line

Geschwindigkeit

Gemessen anhand der Ausgabegeschwindigkeit (Tokens pro Sekunde)

Output Speed: gpt-oss-20b (high)

Output speed: output tokens per second · 10,000 input tokens

Latency vs. Output Speed

Latency: seconds to first token received · Output speed: output tokens per second · 10,000 input tokens
Most attractive quadrant
Pareto line

Latenz

Gemessen anhand der Zeit (in Sekunden) bis zum ersten Token

Zeit bis zum ersten Antworttoken

Seconds to first token received · Lower is better · 10,000 input tokens

Ende-zu-Ende-Antwortzeit

Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed

Ende-zu-Ende-Antwortzeit

Seconds to output 500 tokens, including reasoning model 'thinking' time · Lower is better · 10,000 input tokens

Wichtige Vergleichsmetriken und API-Funktionen

Logo von CoreWeaveCoreWeave
131k
Offen
$0.01
211
0.59
12.45
9.49
Logo von Amazon BedrockAmazon Bedrock
131k
Offen
$0.01
137
31.03
49.27
14.59
Logo von DeepInfraDeepInfra
131k
Offen
$0.01
115
0.44
22.09
17.32
Logo von HyperbolicHyperbolic
131k
Offen
$0.01
--
--
--
--
Logo von Lightning AILightning AI
128k
Offen
$0.01
--
--
--
--
Logo von CloudflareCloudflare
128k
Offen
$0.03
--
--
--
--
Logo von NovitaNovita
131k
Offen
$0.01
200
1.16
13.63
9.98
Logo von GoogleGoogle
131k
Offen
$0.01
407
0.36
6.50
4.92
Logo von GroqGroq
131k
Offen
$0.02
950
0.77
3.40
2.11

Häufig gestellte Fragen

Häufige Fragen zu den Anbietern von gpt-oss-20b (high)