gpt-oss-120b (high) Benchmarking e análise de provedores de API
Análise dos provedores de API do gpt-oss-120b (high) em métricas de desempenho como latência (tempo até o primeiro token), velocidade de saída (tokens de saída por segundo), preço e outras. Os provedores de API avaliados incluem Groq, Cloudflare, Scaleway, DeepInfra, CoreWeave, Microsoft Azure, Novita, DeepInfra (Turbo), Cerebras, Google Vertex, Clarifai, Baseten, SambaNova, Parasail, CompactifAI, Fireworks, Nebius (Base), Hyperbolic, Databricks e Amazon Bedrock.
Mais rápido
Velocidade de saída
20 provedores no total
Menor latência
Tempo até o primeiro token da resposta final
20 provedores no total
Menor preço
Preço combinado (por 1M de tokens)
20 provedores no total
gpt-oss-120b (high) está disponível em 20 provedores de API, cada um com características de desempenho e preços diferentes. Veja abaixo uma comparação das principais métricas entre os provedores.
- Em velocidade de saída, os principais provedores são Cerebras (1,868.9 t/s), SambaNova (708.7 t/s) e Groq (477.2 t/s). A velocidade varia significativamente entre os provedores, com uma diferença de 5732% entre o mais rápido e o mais lento.
- Em latência, Cerebras (1.61s), SambaNova (4.23s) e Groq (4.86s) têm o menor tempo até o primeiro token da resposta final.
- Em preço, CoreWeave (0.04), DeepInfra (0.05) e CompactifAI (0.07) têm os menores preços combinados por 1M de tokens. Os preços variam em até 8.9x entre os provedores.
- Cerebras oferece o melhor desempenho, com a maior velocidade e a menor latência. Para otimizar os custos, CoreWeave tem o preço mais competitivo.
Destaques
Atualização: A carga de trabalho padrão do benchmarking de desempenho passou a usar 10k tokens de entrada para representar melhor os casos de uso em produção. Você ainda pode selecionar outras cargas de trabalho acima.
Acurácia do endpointNew
Endpoint Accuracy Index: gpt-oss-120b (high)
Preços
Pricing: Cache Hit, Input, and Output
Pricing: Blended Price
Pricing: Cache Discount
Output Speed vs. Price
Velocidade
Medida pela velocidade de saída (tokens por segundo)
Output Speed: gpt-oss-120b (high)
Latency vs. Output Speed
Latência
Medida pelo tempo (segundos) até o primeiro token
Tempo até o primeiro token da resposta final: provedores do gpt-oss-120b (high)
Tempo de resposta de ponta a ponta
Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed
Tempo de resposta de ponta a ponta: provedores do gpt-oss-120b (high)
Avaliações do endpoint
GPQAx16 Performance: gpt-oss-120b (high)
AIME25x32 Performance: gpt-oss-120b (high)
IFBenchx8 Performance: gpt-oss-120b (high)
Principais métricas de comparação e recursos da API
86% | 131k | Aberto | $0.06 | 477 | 0.67 | 5.91 | 4.19 | |||
70% | 116k | Aberto | $0.15 | 112 | 1.05 | 23.45 | 17.92 | |||
97% | 128k | Aberto | $0.09 | 169 | 1.24 | 16.02 | 11.82 | |||
97% | 131k | Aberto | $0.02 | 45 | 0.63 | 55.81 | 44.15 | |||
98% | 131k | Aberto | $0.02 | 32 | 1.46 | 79.48 | 62.42 | |||
93% | 131k | Aberto | $0.08 | 305 | 0.91 | 9.10 | 6.55 | |||
91% | 131k | Aberto | $0.03 | 89 | 1.38 | 29.37 | 22.39 | |||
84% | 131k | Aberto | $0.08 | 170 | 0.71 | 15.40 | 11.75 | |||
87% | 131k | Aberto | $0.15 | 1,869 | 0.53 | 1.87 | 1.07 | |||
72% | 131k | Aberto | $0.05 | 423 | 0.39 | 6.30 | 4.73 | |||
n/d | 131k | Aberto | $0.05 | -- | -- | -- | -- | |||
n/d | 128k | Aberto | $0.05 | 179 | 0.26 | 14.21 | 11.16 | |||
98% | 131k | Aberto | $0.10 | 709 | 1.40 | 4.93 | 2.82 | |||
98% | 131k | Aberto | -- | 170 | 0.89 | 15.59 | 11.76 | |||
n/d | 131k | Aberto | $0.03 | -- | -- | -- | -- | |||
86% | 131k | Aberto | $0.08 | 118 | 0.78 | 21.91 | 16.90 | |||
97% | 128k | Aberto | $0.08 | 221 | 1.01 | 12.34 | 9.06 | |||
n/d | 131k | Aberto | $0.12 | -- | -- | -- | -- | |||
89% | 128k | Aberto | $0.08 | 325 | 0.65 | 8.33 | 6.15 | |||
101% | 131k | Aberto | $0.08 | 101 | 1.00 | 25.76 | 19.81 | |||
Perguntas frequentes
Perguntas comuns sobre os provedores do gpt-oss-120b (high)
gpt-oss-120b (high) está disponível em 20 provedores de API: Groq, Cloudflare, Scaleway, DeepInfra, CoreWeave, Azure, Novita, DeepInfra (Turbo), Cerebras, Google Vertex, Clarifai, Baseten, SambaNova, Parasail, CompactifAI, Fireworks, Nebius (Base), Hyperbolic, Databricks e Amazon. Cada provedor oferece características de desempenho e preços diferentes.
Atualmente, o gpt-oss-120b (high) está disponível em 20 provedores de API que avaliamos e acompanhamos.
Os provedores mais acessíveis para o gpt-oss-120b (high) em preço combinado são CoreWeave ($0.04 por 1M de tokens), DeepInfra ($0.05 por 1M de tokens) e CompactifAI ($0.07 por 1M de tokens). O preço combinado usa uma proporção de 7:2:1 entre tokens de acerto do cache, entrada e saída.
Os provedores com o menor preço de tokens de saída para o gpt-oss-120b (high) são DeepInfra ($0.17 por 1M de tokens de saída), CoreWeave ($0.17 por 1M de tokens de saída) e CompactifAI ($0.23 por 1M de tokens de saída).
Os preços do gpt-oss-120b (high) variam em até 8.9x entre os provedores. O mais acessível é CoreWeave, com $0.04 por 1M de tokens, enquanto Cloudflare cobra $0.39 por 1M de tokens.
Todos os 20 provedores do gpt-oss-120b (high) são compatíveis com o modo JSON para saída estruturada.
Todos os 20 provedores do gpt-oss-120b (high) são compatíveis com chamadas de funções (uso de ferramentas).
Ao escolher um provedor para o gpt-oss-120b (high), considere a velocidade de saída (para tarefas que exigem alta vazão), a latência (para aplicações interativas que precisam de respostas iniciais rápidas), o preço (para cargas de trabalho atentas aos custos) e os recursos da API, como modo JSON e chamadas de funções.
Sim. O desempenho dos provedores pode variar ao longo do tempo devido a mudanças na infraestrutura, balanceamento de carga e atualizações. Avaliamos continuamente todos os provedores e exibimos as tendências históricas de desempenho nos gráficos de evolução ao longo do tempo.
Para saber mais sobre a inteligência, as capacidades e as modalidades do gpt-oss-120b (high), além de como ele se compara a outros modelos, consulte a página de visão geral do modelo. Ver visão geral do modelo