••

Open weights model

•

Released August 2025

gpt-oss-120b (High) Benchmarking und Analyse von API-Anbietern

Modellvergleich

Diese Analyse soll Sie bei der Auswahl des besten API-Anbieters von gpt-oss-120b (High) für Ihren Anwendungsfall unterstützen.

Am schnellsten

#1
CerebrasCerebras
1,646.8 t/s
#2
SambaNovaSambaNova
701.4 t/s
#3
GroqGroq
472.6 t/s
#4
AzureAzure
379.4 t/s
#5
Nebius (Base)Nebius (Base)
357.9 t/s

Ausgabegeschwindigkeit

Insgesamt 16 Anbieter

Niedrigste Latenz

#1
CerebrasCerebras
1.60 s
#2
SambaNovaSambaNova
3.98 s
#3
GroqGroq
4.87 s
#4
AzureAzure
6.01 s
#5
Nebius (Base)Nebius (Base)
6.55 s

Zeit bis zum ersten Antworttoken

Insgesamt 16 Anbieter

Niedrigster Preis

#1
CoreWeaveCoreWeave
$0.04
#2
DeepInfraDeepInfra
$0.05
#3
NovitaNovita
$0.07
#4
CrusoeCrusoe
$0.07
#5
Google VertexGoogle Vertex
$0.12

Mischpreis (pro 1 Mio. Tokens)

Insgesamt 16 Anbieter

gpt-oss-120b (high) ist über 16 API-Anbieter verfügbar, die jeweils unterschiedliche Leistungsmerkmale und Preise bieten. Im Folgenden werden die wichtigsten Metriken der Anbieter verglichen.

  • Bei der Ausgabegeschwindigkeit führen Cerebras (1,646.8 Tokens/s), SambaNova (701.4 Tokens/s) und Groq (472.6 Tokens/s). Die Geschwindigkeit unterscheidet sich erheblich zwischen den Anbietern: Der Unterschied zwischen dem schnellsten und langsamsten beträgt 2909 %.
  • Bei der Latenz bieten Cerebras (1.60 s), SambaNova (3.98 s) und Groq (4.87 s) die niedrigste Zeit bis zum ersten Antworttoken.
  • Bei den Preisen bieten CoreWeave (0.04), DeepInfra (0.05) und Novita (0.07) die niedrigsten Mischpreise pro 1 Mio. Tokens. Die Preise unterscheiden sich je nach Anbieter bis zum 8.9-Fachen.
  • Cerebras bietet mit der höchsten Geschwindigkeit und der niedrigsten Latenz die beste Leistung. Für eine Kostenoptimierung bietet CoreWeave den konkurrenzfähigsten Preis.
Output tokens per second · Higher is better
Seconds to first answer token received · Lower is better
USD per 1M tokens (blended) · Lower is better

Aktualisierung: Der Standard-Workload für das Performance-Benchmarking wurde auf 10k Eingabetokens umgestellt, um Produktionsanwendungsfälle besser abzubilden. Oben können weiterhin andere Workloads ausgewählt werden.

Endpunktgenauigkeit

Endpoint Accuracy Index: gpt-oss-120b (High)

v1.0 · Composite of BFCL v4-500, HLE-250 and AA-LCR-25 run against each provider endpoint · Percentage of the reference endpoint, with 95% confidence interval · Higher is better

Preise

Preise: Cache-Treffer, Eingabe und Ausgabe

Price (USD per M Tokens) · Lower is better · 10,000 input tokens

Kosten pro Aufgabe des Intelligence Index

Weighted average cost (USD) per Intelligence Index task · Segmented by token type · Lower is better

Ausgabegeschwindigkeit im Vergleich zu Preis

Blended at 7:2:1 (cache-input-output) · Output speed: output tokens per second · USD per 1M tokens (blended)
Most attractive quadrant
Pareto line

Geschwindigkeit

Gemessen anhand der Ausgabegeschwindigkeit (Tokens pro Sekunde)

Ausgabegeschwindigkeit: gpt-oss-120b (High)

Ausgabegeschwindigkeit: Ausgabe-Token pro Sekunde · 10,000 input tokens

Zeit pro Aufgabe des Intelligence Index

Weighted average decode time (minutes) per Intelligence Index task · Excludes TTFT and overhead time · Lower is better

Kosten pro Aufgabe im Vergleich zu Zeit pro Aufgabe

Weighted average cost (USD) per Intelligence Index task · Weighted average decode time (minutes) per Intelligence Index task
Most attractive quadrant
Pareto line

Latenz

Gemessen anhand der Zeit (in Sekunden) bis zum ersten Token

Zeit bis zum ersten Antworttoken

Seconds to first token received · Lower is better · 10,000 input tokens

Cache-Verhalten

Cache-Trefferquote

Anteil der cachefähigen Eingabe-Token aus dem Cache · Median der letzten vier Wochen, aktualisiert am 26. Sept. 2026

Kosten pro Aufgabe vs. Cache-Trefferquote

Weighted average cost (USD) per Intelligence Index task · Cache hit rate: median of the last four weeks, updated Sep 26, 2026
Most attractive quadrant
Pareto line

Ende-zu-Ende-Antwortzeit

Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed

Ende-zu-Ende-Antwortzeit

Seconds to output 500 tokens, including reasoning model 'thinking' time · Lower is better · 10,000 input tokens

Wichtige Vergleichsmetriken und API-Funktionen

Logo von GroqGroq
86%
131k
Offen
--
472
0.69
5.99
4.23
Logo von ScalewayScaleway
97%
128k
Offen
$0.12
100
1.32
26.38
20.05
Logo von CoreWeaveCoreWeave
98%
131k
Offen
$0.02
102
1.28
25.81
19.62
Logo von NovitaNovita
91%
131k
Offen
$0.04
187
1.03
14.39
10.69
Logo von DeepInfraDeepInfra
84%
131k
Offen
$0.11
47
0.66
53.37
42.17
Logo von Microsoft AzureMicrosoft Azure
93%
131k
Offen
$0.11
369
0.74
7.51
5.42
Logo von DeepInfraDeepInfra
97%
131k
Offen
$0.03
50
0.65
51.01
40.29
Logo von CerebrasCerebras
87%
131k
Offen
$0.23
1,748
0.36
1.79
1.14
Logo von GoogleGoogle
72%
131k
Offen
$0.06
185
0.95
14.50
10.84
Logo von Together AITogether AI
77%
131k
Offen
$0.11
98
0.57
26.02
20.36
Logo von CrusoeCrusoe
k. A.
131k
Offen
$0.04
348
0.44
7.62
5.74
Logo von BasetenBaseten
k. A.
128k
Offen
$0.07
213
0.18
11.89
9.37
Logo von SambaNovaSambaNova
98%
131k
Offen
$0.15
708
1.14
4.67
2.82
Logo von ParasailParasail
98%
131k
Offen
$0.06
287
0.82
9.53
6.97
Logo von NebiusNebius
97%
128k
Offen
$0.11
367
0.91
7.73
5.46
Logo von Amazon BedrockAmazon Bedrock
101%
131k
Offen
$0.11
96
1.01
26.92
20.73

Häufig gestellte Fragen

Häufige Fragen zu den Anbietern von gpt-oss-120b (High)