分析 gpt-oss-20b (low) 各 API 服务商的性能指标,包括延迟(首 Token 延迟)、输出速度(每秒输出 token 数)、价格等。参与基准测试的 API 服务商包括 Clarifai、Groq、Lightning AI、Hyperbolic、CoreWeave、Cloudflare、Amazon Bedrock、Novita、Databricks和Google Vertex。
速度最快
输出速度
共 10 家服务商
延迟最低
首个答案 Token 延迟
共 10 家服务商
价格最低
每 100 万 token 的混合价格
共 10 家服务商
可通过 10 家 API 服务商使用 gpt-oss-20b (low),每家服务商的性能特征和价格各不相同。下方对比了各服务商的关键指标。
- 输出速度最快的服务商是 Groq(934.5 t/s)、Databricks(290.7 t/s)和Lightning AI(273.7 t/s)。 各服务商之间的速度差异显著,最快与最慢相差 1198%。
- 延迟方面,Groq(2.95 秒)、Databricks(7.77 秒)和Lightning AI(8.07 秒) 的首个答案 Token 延迟最低。
- 价格方面,CoreWeave(0.04)、Novita(0.05)和Clarifai(0.06) 每 100 万 token 的混合价格最低。 各服务商价格最多相差 5.3 倍。
- Groq 兼具最高速度和最低延迟,性能表现最佳。若要优化成本,CoreWeave 的价格最具竞争力。
亮点
更新:默认性能基准测试工作负载已调整为 1 万个输入 token,以更贴近生产使用场景。你仍可在上方选择其他工作负载。
价格
Pricing: Cache Hit, Input, and Output
Pricing: Blended Price
Output Speed vs. Price
速度
按输出速度(每秒 token 数)衡量
Output Speed: gpt-oss-20b (low)
Latency vs. Output Speed
延迟
按首 Token 延迟(秒)衡量
首个答案 Token 延迟:gpt-oss-20b (low) 服务商
端到端响应时间
Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed
端到端响应时间:gpt-oss-20b (low) 服务商
关键比较指标与 API 功能
131k | 开放 | -- | -- | -- | -- | -- | |||
131k | 开放 | -- | 934 | 0.81 | 3.48 | 2.14 | |||
128k | 开放 | -- | 274 | 0.76 | 9.90 | 7.31 | |||
131k | 开放 | -- | -- | -- | -- | -- | |||
131k | 开放 | -- | 107 | 0.95 | 24.40 | 18.77 | |||
128k | 开放 | -- | 140 | 0.77 | 18.59 | 14.25 | |||
131k | 开放 | -- | 101 | 13.01 | 37.74 | 19.78 | |||
131k | 开放 | -- | 72 | 1.14 | 35.87 | 27.79 | |||
131k | 开放 | -- | 291 | 0.89 | 9.49 | 6.88 | |||
131k | 开放 | -- | 246 | 0.41 | 10.56 | 8.12 | |||
常见问题
关于 gpt-oss-20b (low) 服务商的常见问题
可通过 10 家 API 服务商使用 gpt-oss-20b (low):Clarifai、Groq、Lightning AI、Hyperbolic、CoreWeave、Cloudflare、Amazon、Novita、Databricks和Google Vertex。每家服务商的性能特征和价格各不相同。
目前可通过我们进行基准测试和跟踪的 10 家 API 服务商使用 gpt-oss-20b (low)。
按输出速度计算,gpt-oss-20b (low) 速度最快的服务商是 Groq(934.5 t/s)、Databricks(290.7 t/s)和Lightning AI(273.7 t/s)。输出速度衡量模型开始响应后生成 token 的速度。
gpt-oss-20b (low) 的首个答案 Token 延迟最低的服务商是 Groq(2.95s)、Databricks(7.77s)和Lightning AI(8.07s)。延迟越低,初始响应越快。
gpt-oss-20b (low) 输出 token 价格最低的服务商是 Hyperbolic(每 100 万输出 token $0.10)、CoreWeave(每 100 万输出 token $0.13)和Novita(每 100 万输出 token $0.15)。
gpt-oss-20b (low) 各服务商价格最多相差 5.3 倍。最实惠的是 CoreWeave,每 100 万 token 收费 $0.04;Cloudflare 则收费 $0.21。
提供 gpt-oss-20b (low) 的全部 10 家服务商均支持用于结构化输出的 JSON 模式。
提供 gpt-oss-20b (low) 的 10 家服务商中,有 8 家支持函数调用:Clarifai、Groq、Lightning AI、CoreWeave、Cloudflare、Amazon、Databricks和Google Vertex。
选择 gpt-oss-20b (low) 服务商时,请考虑:输出速度(适合吞吐量密集型任务)、延迟(适合需要快速首次响应的交互式应用)、价格(适合成本敏感型工作负载),以及 JSON 模式或函数调用等 API 功能。
会。服务商性能可能因基础设施变化、负载均衡和更新而随时间波动。我们持续对所有服务商进行基准测试,并在“随时间变化”图表中展示历史性能趋势。
有关 gpt-oss-20b (low) 的智能、能力、模态及其与其他模型的比较,请参阅模型概览页面。 查看模型概览