••

Open weights model

•

Released 2025년 8월

gpt-oss-120b (High) API 제공업체 벤치마킹 및 분석

모델 비교

이 분석은 사용 사례에 가장 적합한 gpt-oss-120b (High) API 제공업체를 선택하는 데 도움을 드립니다.

가장 빠름

#1
CerebrasCerebras
1,740.8 t/s
#2
SambaNovaSambaNova
706.4 t/s
#3
GroqGroq
472.6 t/s
#4
AzureAzure
320.3 t/s
#5
Nebius (Base)Nebius (Base)
283.8 t/s

출력 속도

총 제공업체 18곳

가장 낮은 지연 시간

#1
CerebrasCerebras
1.60 s
#2
SambaNovaSambaNova
3.97 s
#3
GroqGroq
4.95 s
#4
AzureAzure
7.02 s
#5
BasetenBaseten
7.33 s

첫 답변 토큰까지 걸린 시간

총 제공업체 18곳

가장 낮은 가격

#1
CoreWeaveCoreWeave
$0.04
#2
DeepInfraDeepInfra
$0.05
#3
CrusoeCrusoe
$0.07
#4
NovitaNovita
$0.07
#5
Google VertexGoogle Vertex
$0.12

혼합 가격(토큰 100만 개당)

총 제공업체 18곳

gpt-oss-120b (high)은 성능 특성과 가격이 서로 다른 API 제공업체 18곳에서 제공됩니다. 아래에서 제공업체별 주요 지표를 비교합니다.

  • 출력 속도가 가장 높은 제공업체는 Cerebras(1,740.8 t/s), SambaNova(706.4 t/s) 및 Groq(472.6 t/s)입니다. 제공업체별 속도 차이가 크며, 가장 빠른 곳과 가장 느린 곳의 차이는 4137%입니다.
  • Cerebras(1.60초), SambaNova(3.97초) 및 Groq(4.95초)의 첫 답변 토큰까지 걸린 시간이 가장 짧습니다.
  • CoreWeave(0.04), DeepInfra(0.05) 및 Crusoe(0.07)의 토큰 100만 개당 혼합 가격이 가장 낮습니다. 제공업체별 가격은 최대 8.9배 차이 납니다.
  • Cerebras은 속도가 가장 빠르고 지연 시간이 가장 짧아 최고의 성능을 제공합니다. 비용을 최적화하려면 가격 경쟁력이 가장 뛰어난 CoreWeave이 적합합니다.
Output tokens per second · Higher is better
Seconds to first answer token received · Lower is better
USD per 1M tokens (blended) · Lower is better

업데이트: 프로덕션 사용 사례를 더 잘 반영하도록 기본 성능 벤치마킹 워크로드를 입력 토큰 10k개로 변경했습니다. 위에서 다른 워크로드도 계속 선택할 수 있습니다.

엔드포인트 정확도

엔드포인트 정확도 지수: gpt-oss-120b (High)

v1.0 · Composite of BFCL v4-500, HLE-250 and AA-LCR-25 run against each provider endpoint · Percentage of the reference endpoint, with 95% confidence interval · Higher is better

가격

가격: 캐시 적중, 입력 및 출력

Price (USD per M Tokens) · Lower is better · 10,000 input tokens

가격: 혼합 가격

Blended at 7:2:1 (cache-input-output) · USD per 1M tokens (blended) · Lower is better

가격: 캐시 할인

1 - (cache hit price / input price) · Higher is better

출력 속도와 가격

Blended at 7:2:1 (cache-input-output) · Output speed: output tokens per second · USD per 1M tokens (blended)
Most attractive quadrant
Pareto line

속도

출력 속도(초당 토큰 수)로 측정

출력 속도: gpt-oss-120b (High)

출력 속도: 초당 출력 토큰 수 · 10,000 input tokens

지연 시간과 출력 속도

Latency: seconds to first token received · Output speed: output tokens per second · 10,000 input tokens
Most attractive quadrant
Pareto line

지연 시간

첫 토큰까지 걸린 시간(초)으로 측정

첫 답변 토큰까지 걸린 시간

Seconds to first token received · Lower is better · 10,000 input tokens

종단 간 응답 시간

Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed

종단 간 응답 시간

Seconds to output 500 tokens, including reasoning model 'thinking' time · Lower is better · 10,000 input tokens

주요 비교 지표 및 API 기능

Groq 로고Groq
86%
131k
오픈
--
471
0.71
6.02
4.24
Cloudflare 로고Cloudflare
70%
116k
오픈
$0.23
--
--
--
--
Scaleway 로고Scaleway
97%
128k
오픈
$0.12
100
1.39
26.29
19.92
CoreWeave 로고CoreWeave
98%
131k
오픈
$0.02
43
1.22
59.44
46.57
Microsoft Azure 로고Microsoft Azure
93%
131k
오픈
$0.11
314
0.71
8.66
6.36
Novita 로고Novita
91%
131k
오픈
$0.04
184
1.30
14.89
10.88
DeepInfra 로고DeepInfra
84%
131k
오픈
$0.11
277
0.81
9.83
7.21
DeepInfra 로고DeepInfra
97%
131k
오픈
$0.03
51
0.60
49.98
39.51
Cerebras 로고Cerebras
87%
131k
오픈
$0.23
1,781
0.43
1.84
1.12
Google 로고Google
72%
131k
오픈
$0.06
40
38.59
100.33
49.39
Crusoe 로고Crusoe
N/A
131k
오픈
$0.04
205
0.39
12.56
9.73
Baseten 로고Baseten
N/A
128k
오픈
$0.07
188
0.21
13.49
10.62
SambaNova 로고SambaNova
98%
131k
오픈
$0.15
709
1.12
4.65
2.82
Parasail 로고Parasail
98%
131k
오픈
$0.06
148
0.80
17.75
13.56
Nebius 로고Nebius
97%
128k
오픈
$0.11
240
1.01
11.44
8.34
Hyperbolic 로고Hyperbolic
N/A
131k
오픈
$0.19
--
--
--
--
Amazon Bedrock 로고Amazon Bedrock
101%
131k
오픈
$0.11
86
1.03
30.10
23.26
Together AI 로고Together AI
77%
131k
오픈
$0.11
116
0.41
22.00
17.28

자주 묻는 질문

gpt-oss-120b (High) 제공업체에 관한 일반적인 질문