gpt-oss-120b (low) Benchmarking e análise de provedores de API
Esta análise ajuda você a escolher o melhor provedor de API de gpt-oss-120b (low) para seu caso de uso.
Mais rápido
Velocidade de saída
17 provedores no total
Menor latência
Tempo até o primeiro token da resposta final
17 provedores no total
Menor preço
Preço combinado (por 1M de tokens)
17 provedores no total
gpt-oss-120b (low) está disponível em 17 provedores de API, cada um com características de desempenho e preços diferentes. Veja abaixo uma comparação das principais métricas entre os provedores.
- Em velocidade de saída, os principais provedores são Cerebras (1,767.6 t/s), SambaNova (723.1 t/s) e Groq (472.1 t/s). A velocidade varia significativamente entre os provedores, com uma diferença de 3135% entre o mais rápido e o mais lento.
- Em latência, Cerebras (1.62s), SambaNova (3.84s) e Groq (4.94s) têm o menor tempo até o primeiro token da resposta final.
- Em preço, CoreWeave (0.04), DeepInfra (0.05) e Crusoe (0.07) têm os menores preços combinados por 1M de tokens. Os preços variam em até 8.9x entre os provedores.
- Cerebras oferece o melhor desempenho, com a maior velocidade e a menor latência. Para otimizar os custos, CoreWeave tem o preço mais competitivo.
Destaques
Atualização: A carga de trabalho padrão do benchmarking de desempenho passou a usar 10k tokens de entrada para representar melhor os casos de uso em produção. Você ainda pode selecionar outras cargas de trabalho acima.
Preços
Pricing: Cache Hit, Input, and Output
Pricing: Blended Price
Pricing: Cache Discount
Output Speed vs. Price
Velocidade
Medida pela velocidade de saída (tokens por segundo)
Output Speed: gpt-oss-120b (low)
Latency vs. Output Speed
Latência
Medida pelo tempo (segundos) até o primeiro token
Tempo até o primeiro token da resposta final
Tempo de resposta de ponta a ponta
Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed
Tempo de resposta de ponta a ponta
Principais métricas de comparação e recursos da API
131k | Aberto | -- | -- | -- | -- | -- | |||
131k | Aberto | -- | -- | -- | -- | -- | |||
128k | Aberto | -- | 297 | 1.00 | 9.42 | 6.74 | |||
131k | Aberto | -- | 269 | 0.35 | 9.63 | 7.42 | |||
131k | Aberto | -- | 724 | 1.08 | 4.53 | 2.76 | |||
131k | Aberto | -- | 213 | 0.37 | 12.11 | 9.40 | |||
131k | Aberto | -- | 55 | 0.63 | 46.38 | 36.60 | |||
131k | Aberto | -- | 57 | 1.35 | 45.25 | 35.12 | |||
131k | Aberto | -- | 1,768 | 0.48 | 1.89 | 1.13 | |||
131k | Aberto | -- | 331 | 0.81 | 8.37 | 6.05 | |||
128k | Aberto | -- | -- | -- | -- | -- | |||
128k | Aberto | -- | 296 | 0.23 | 8.67 | 6.75 | |||
131k | Aberto | -- | 72 | 0.97 | 35.81 | 27.87 | |||
131k | Aberto | -- | 159 | 0.81 | 16.49 | 12.54 | |||
131k | Aberto | -- | 152 | 0.54 | 16.98 | 13.16 | |||
131k | Aberto | -- | 472 | 0.71 | 6.01 | 4.24 | |||
131k | Aberto | -- | 90 | 1.01 | 28.68 | 22.14 | |||
Perguntas frequentes
Perguntas comuns sobre os provedores do gpt-oss-120b (low)
gpt-oss-120b (low) está disponível em 17 provedores de API: Snowflake, Hyperbolic, Nebius Base, Crusoe, SambaNova, Google Vertex, DeepInfra, CoreWeave, Cerebras, Azure, Cloudflare, Baseten, Amazon, Parasail, Together AI, Groq e Novita. Cada provedor oferece características de desempenho e preços diferentes.
Atualmente, o gpt-oss-120b (low) está disponível em 17 provedores de API que avaliamos e acompanhamos.
Todos os 17 provedores do gpt-oss-120b (low) são compatíveis com o modo JSON para saída estruturada.
16 de 17 provedores são compatíveis com chamadas de funções para o gpt-oss-120b (low): Hyperbolic, Nebius Base, Crusoe, SambaNova, Google Vertex, DeepInfra, CoreWeave, Cerebras, Azure, Cloudflare, Baseten, Amazon, Parasail, Together AI, Groq e Novita.
Ao escolher um provedor para o gpt-oss-120b (low), considere a velocidade de saída (para tarefas que exigem alta vazão), a latência (para aplicações interativas que precisam de respostas iniciais rápidas), o preço (para cargas de trabalho atentas aos custos) e os recursos da API, como modo JSON e chamadas de funções.
Sim. O desempenho dos provedores pode variar ao longo do tempo devido a mudanças na infraestrutura, balanceamento de carga e atualizações. Avaliamos continuamente todos os provedores e exibimos as tendências históricas de desempenho nos gráficos de evolução ao longo do tempo.
Para saber mais sobre a inteligência, as capacidades e as modalidades do gpt-oss-120b (low), além de como ele se compara a outros modelos, consulte a página de visão geral do modelo. Ver visão geral do modelo