分析 o3 各 API 服务商的性能指标,包括延迟(首 Token 延迟)、输出速度(每秒输出 token 数)、价格等。参与基准测试的 API 服务商包括 Microsoft Azure、OpenAI和OpenAI。
速度最快
#1
OpenAI120.1 t/s
#2
Azure98.3 t/s
输出速度
共 3 家服务商
延迟最低
#1
OpenAI8.41 s
#2
Azure29.42 s
首个答案 Token 延迟
共 3 家服务商
价格最低
#1
Azure$1.55
#2
OpenAI$1.55
#3
OpenAI$13.00
每 100 万 token 的混合价格
共 3 家服务商
可通过 3 家 API 服务商使用 o3,每家服务商的性能特征和价格各不相同。下方对比了各服务商的关键指标。
- 输出速度最快的服务商是 OpenAI(120.1 t/s)和Azure(98.3 t/s)。
- 延迟方面,OpenAI(8.41 秒)和Azure(29.42 秒) 的首个答案 Token 延迟最低。
- 价格方面,Azure(1.55)、OpenAI(1.55)和OpenAI(13.00) 每 100 万 token 的混合价格最低。
- OpenAI 兼具最高速度和最低延迟,性能表现最佳。若要优化成本,Azure 的价格最具竞争力。
亮点
更新:默认性能基准测试工作负载已调整为 1 万个输入 token,以更贴近生产使用场景。你仍可在上方选择其他工作负载。
价格
Pricing: Cache Hit, Input, and Output
Price (USD per M Tokens) · Lower is better · 10,000 input tokens
Pricing: Blended Price
Blended at 7:2:1 (cache-input-output) · USD per 1M tokens (blended) · Lower is better
Pricing: Cache Discount
1 - (cache hit price / input price) · Higher is better
Output Speed vs. Price
Blended at 7:2:1 (cache-input-output) · Output speed: output tokens per second · USD per 1M tokens (blended)
Most attractive quadrant
速度
按输出速度(每秒 token 数)衡量
Output Speed: o3
Output speed: output tokens per second · 10,000 input tokens
Latency vs. Output Speed
Latency: seconds to first token received · Output speed: output tokens per second · 10,000 input tokens
Most attractive quadrant
延迟
按首 Token 延迟(秒)衡量
首个答案 Token 延迟:o3 服务商
Seconds to first token received · Lower is better · 10,000 input tokens
端到端响应时间
Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed
端到端响应时间:o3 服务商
Seconds to output 500 tokens, including reasoning model 'thinking' time · Lower is better · 10,000 input tokens
关键比较指标与 API 功能
常见问题
关于 o3 服务商的常见问题
目前可通过我们进行基准测试和跟踪的 3 家 API 服务商使用 o3。
选择 o3 服务商时,请考虑:输出速度(适合吞吐量密集型任务)、延迟(适合需要快速首次响应的交互式应用)、价格(适合成本敏感型工作负载),以及 JSON 模式或函数调用等 API 功能。
会。服务商性能可能因基础设施变化、负载均衡和更新而随时间波动。我们持续对所有服务商进行基准测试,并在“随时间变化”图表中展示历史性能趋势。
有关 o3 的智能、能力、模态及其与其他模型的比较,请参阅模型概览页面。 查看模型概览