gpt-oss-20b (high) Benchmarking e análise de provedores de API
Análise dos provedores de API do gpt-oss-20b (high) em métricas de desempenho como latência (tempo até o primeiro token), velocidade de saída (tokens de saída por segundo), preço e outras. Os provedores de API avaliados incluem CoreWeave, Amazon Bedrock, DeepInfra, Hyperbolic, Lightning AI, Cloudflare, Novita, Google Vertex, Databricks, Groq e Clarifai.
Mais rápido
Velocidade de saída
11 provedores no total
Menor latência
Tempo até o primeiro token da resposta final
11 provedores no total
Menor preço
Preço combinado (por 1M de tokens)
11 provedores no total
gpt-oss-20b (high) está disponível em 11 provedores de API, cada um com características de desempenho e preços diferentes. Veja abaixo uma comparação das principais métricas entre os provedores.
- Em velocidade de saída, os principais provedores são Groq (928.1 t/s), Databricks (311.8 t/s) e Google Vertex (307.6 t/s). A velocidade varia significativamente entre os provedores, com uma diferença de 1446% entre o mais rápido e o mais lento.
- Em latência, Groq (2.96s), Databricks (7.35s) e Lightning AI (8.04s) têm o menor tempo até o primeiro token da resposta final.
- Em preço, CoreWeave (0.04), DeepInfra (0.04) e Novita (0.05) têm os menores preços combinados por 1M de tokens. Os preços variam em até 5.3x entre os provedores.
- Groq oferece o melhor desempenho, com a maior velocidade e a menor latência. Para otimizar os custos, CoreWeave tem o preço mais competitivo.
Destaques
Atualização: A carga de trabalho padrão do benchmarking de desempenho passou a usar 10k tokens de entrada para representar melhor os casos de uso em produção. Você ainda pode selecionar outras cargas de trabalho acima.
Preços
Pricing: Cache Hit, Input, and Output
Pricing: Blended Price
Output Speed vs. Price
Velocidade
Medida pela velocidade de saída (tokens por segundo)
Output Speed: gpt-oss-20b (high)
Latency vs. Output Speed
Latência
Medida pelo tempo (segundos) até o primeiro token
Tempo até o primeiro token da resposta final: provedores do gpt-oss-20b (high)
Tempo de resposta de ponta a ponta
Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed
Tempo de resposta de ponta a ponta: provedores do gpt-oss-20b (high)
Principais métricas de comparação e recursos da API
131k | Aberto | $0.01 | 125 | 0.89 | 20.95 | 16.05 | |||
131k | Aberto | $0.03 | 184 | 30.67 | 44.24 | 10.85 | |||
131k | Aberto | $0.01 | 107 | 0.51 | 23.93 | 18.74 | |||
131k | Aberto | $0.04 | -- | -- | -- | -- | |||
128k | Aberto | $0.02 | 273 | 0.71 | 9.87 | 7.33 | |||
128k | Aberto | $0.08 | 143 | 0.75 | 18.17 | 13.94 | |||
131k | Aberto | $0.02 | 60 | 1.08 | 42.72 | 33.31 | |||
131k | Aberto | $0.03 | 308 | 3.38 | 11.51 | 6.50 | |||
131k | Aberto | $0.03 | 312 | 0.93 | 8.95 | 6.41 | |||
131k | Aberto | $0.03 | 928 | 0.80 | 3.50 | 2.15 | |||
131k | Aberto | $0.02 | -- | -- | -- | -- | |||
Perguntas frequentes
Perguntas comuns sobre os provedores do gpt-oss-20b (high)
gpt-oss-20b (high) está disponível em 11 provedores de API: CoreWeave, Amazon, DeepInfra, Hyperbolic, Lightning AI, Cloudflare, Novita, Google Vertex, Databricks, Groq e Clarifai. Cada provedor oferece características de desempenho e preços diferentes.
Atualmente, o gpt-oss-20b (high) está disponível em 11 provedores de API que avaliamos e acompanhamos.
Os provedores mais rápidos para o gpt-oss-20b (high) em velocidade de saída são Groq (928.1 t/s), Databricks (311.8 t/s) e Google Vertex (307.6 t/s). A velocidade de saída mede a rapidez com que os tokens são gerados depois que o modelo começa a responder.
Os provedores com o menor tempo até o primeiro token da resposta final para o gpt-oss-20b (high) são Groq (2.96s), Databricks (7.35s) e Lightning AI (8.04s). Uma latência menor significa um tempo de resposta inicial mais rápido.
Os provedores com o menor preço de tokens de saída para o gpt-oss-20b (high) são Hyperbolic ($0.10 por 1M de tokens de saída), CoreWeave ($0.13 por 1M de tokens de saída) e DeepInfra ($0.14 por 1M de tokens de saída).
Os preços do gpt-oss-20b (high) variam em até 5.3x entre os provedores. O mais acessível é CoreWeave, com $0.04 por 1M de tokens, enquanto Cloudflare cobra $0.21 por 1M de tokens.
Todos os 11 provedores do gpt-oss-20b (high) são compatíveis com o modo JSON para saída estruturada.
9 de 11 provedores são compatíveis com chamadas de funções para o gpt-oss-20b (high): CoreWeave, Amazon, DeepInfra, Lightning AI, Cloudflare, Google Vertex, Databricks, Groq e Clarifai.
Ao escolher um provedor para o gpt-oss-20b (high), considere a velocidade de saída (para tarefas que exigem alta vazão), a latência (para aplicações interativas que precisam de respostas iniciais rápidas), o preço (para cargas de trabalho atentas aos custos) e os recursos da API, como modo JSON e chamadas de funções.
Sim. O desempenho dos provedores pode variar ao longo do tempo devido a mudanças na infraestrutura, balanceamento de carga e atualizações. Avaliamos continuamente todos os provedores e exibimos as tendências históricas de desempenho nos gráficos de evolução ao longo do tempo.
Para saber mais sobre a inteligência, as capacidades e as modalidades do gpt-oss-20b (high), além de como ele se compara a outros modelos, consulte a página de visão geral do modelo. Ver visão geral do modelo