gpt-oss-120b (low) Benchmarking e análise de provedores de API
Análise dos provedores de API do gpt-oss-120b (low) em métricas de desempenho como latência (tempo até o primeiro token), velocidade de saída (tokens de saída por segundo), preço e outras. Os provedores de API avaliados incluem Snowflake, Hyperbolic, Nebius Base, SambaNova, Google Vertex, Fireworks, CoreWeave, Cerebras, Microsoft Azure, Cloudflare, CompactifAI, Baseten, Amazon Bedrock, Parasail, Databricks, Groq, Clarifai e Novita.
Mais rápido
Velocidade de saída
18 provedores no total
Menor latência
Tempo até o primeiro token da resposta final
18 provedores no total
Menor preço
Preço combinado (por 1M de tokens)
18 provedores no total
gpt-oss-120b (low) está disponível em 18 provedores de API, cada um com características de desempenho e preços diferentes. Veja abaixo uma comparação das principais métricas entre os provedores.
- Em velocidade de saída, os principais provedores são Cerebras (1,771.7 t/s), SambaNova (734.1 t/s) e Groq (474.3 t/s). A velocidade varia significativamente entre os provedores, com uma diferença de 4643% entre o mais rápido e o mais lento.
- Em latência, Cerebras (1.64s), SambaNova (3.97s) e Groq (4.90s) têm o menor tempo até o primeiro token da resposta final.
- Em preço, CoreWeave (0.04), CompactifAI (0.07) e Novita (0.07) têm os menores preços combinados por 1M de tokens. Os preços variam em até 8.9x entre os provedores.
- Cerebras oferece o melhor desempenho, com a maior velocidade e a menor latência. Para otimizar os custos, CoreWeave tem o preço mais competitivo.
Destaques
Atualização: A carga de trabalho padrão do benchmarking de desempenho passou a usar 10k tokens de entrada para representar melhor os casos de uso em produção. Você ainda pode selecionar outras cargas de trabalho acima.
Preços
Pricing: Cache Hit, Input, and Output
Pricing: Blended Price
Pricing: Cache Discount
Output Speed vs. Price
Velocidade
Medida pela velocidade de saída (tokens por segundo)
Output Speed: gpt-oss-120b (low)
Latency vs. Output Speed
Latência
Medida pelo tempo (segundos) até o primeiro token
Tempo até o primeiro token da resposta final: provedores do gpt-oss-120b (low)
Tempo de resposta de ponta a ponta
Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed
Tempo de resposta de ponta a ponta: provedores do gpt-oss-120b (low)
Principais métricas de comparação e recursos da API
131k | Aberto | $0.03 | -- | -- | -- | -- | |||
131k | Aberto | $0.04 | -- | -- | -- | -- | |||
128k | Aberto | $0.02 | 256 | 0.97 | 10.74 | 7.81 | |||
131k | Aberto | $0.03 | 734 | 1.25 | 4.65 | 2.72 | |||
131k | Aberto | $0.01 | 407 | 0.38 | 6.52 | 4.91 | |||
131k | Aberto | $0.02 | 97 | 0.80 | 26.65 | 20.68 | |||
131k | Aberto | $0.0042 | 37 | 1.41 | 68.33 | 53.54 | |||
131k | Aberto | $0.05 | 1,772 | 0.51 | 1.92 | 1.13 | |||
131k | Aberto | $0.02 | 324 | 1.27 | 8.99 | 6.18 | |||
128k | Aberto | $0.05 | 121 | 1.04 | 21.71 | 16.54 | |||
131k | Aberto | $0.01 | -- | -- | -- | -- | |||
128k | Aberto | $0.01 | 163 | 0.26 | 15.60 | 12.27 | |||
131k | Aberto | $0.02 | 107 | 1.05 | 24.50 | 18.76 | |||
131k | Aberto | -- | 150 | 0.84 | 17.46 | 13.30 | |||
128k | Aberto | $0.02 | 323 | 0.65 | 8.40 | 6.20 | |||
131k | Aberto | $0.02 | 474 | 0.69 | 5.96 | 4.22 | |||
131k | Aberto | $0.01 | -- | -- | -- | -- | |||
131k | Aberto | $0.01 | 80 | 1.13 | 32.43 | 25.04 | |||
Perguntas frequentes
Perguntas comuns sobre os provedores do gpt-oss-120b (low)
gpt-oss-120b (low) está disponível em 18 provedores de API: Snowflake, Hyperbolic, Nebius Base, SambaNova, Google Vertex, Fireworks, CoreWeave, Cerebras, Azure, Cloudflare, CompactifAI, Baseten, Amazon, Parasail, Databricks, Groq, Clarifai e Novita. Cada provedor oferece características de desempenho e preços diferentes.
Atualmente, o gpt-oss-120b (low) está disponível em 18 provedores de API que avaliamos e acompanhamos.
Os provedores mais acessíveis para o gpt-oss-120b (low) em preço combinado são CoreWeave ($0.04 por 1M de tokens), CompactifAI ($0.07 por 1M de tokens) e Novita ($0.07 por 1M de tokens). O preço combinado usa uma proporção de 7:2:1 entre tokens de acerto do cache, entrada e saída.
Os provedores com o menor preço de tokens de entrada para o gpt-oss-120b (low) são CoreWeave ($0.03 por 1M de tokens de entrada), CompactifAI ($0.05 por 1M de tokens de entrada) e Novita ($0.05 por 1M de tokens de entrada).
Os provedores com o menor preço de tokens de saída para o gpt-oss-120b (low) são CoreWeave ($0.17 por 1M de tokens de saída), Snowflake ($0.22 por 1M de tokens de saída) e CompactifAI ($0.23 por 1M de tokens de saída).
Todos os 18 provedores do gpt-oss-120b (low) são compatíveis com o modo JSON para saída estruturada.
17 de 18 provedores são compatíveis com chamadas de funções para o gpt-oss-120b (low): Hyperbolic, Nebius Base, SambaNova, Google Vertex, Fireworks, CoreWeave, Cerebras, Azure, Cloudflare, CompactifAI, Baseten, Amazon, Parasail, Databricks, Groq, Clarifai e Novita.
Ao escolher um provedor para o gpt-oss-120b (low), considere a velocidade de saída (para tarefas que exigem alta vazão), a latência (para aplicações interativas que precisam de respostas iniciais rápidas), o preço (para cargas de trabalho atentas aos custos) e os recursos da API, como modo JSON e chamadas de funções.
Sim. O desempenho dos provedores pode variar ao longo do tempo devido a mudanças na infraestrutura, balanceamento de carga e atualizações. Avaliamos continuamente todos os provedores e exibimos as tendências históricas de desempenho nos gráficos de evolução ao longo do tempo.
Para saber mais sobre a inteligência, as capacidades e as modalidades do gpt-oss-120b (low), além de como ele se compara a outros modelos, consulte a página de visão geral do modelo. Ver visão geral do modelo