gpt-oss-120b (Low) Benchmarking e análise de provedores de API
Esta análise ajuda você a escolher o melhor provedor de API de gpt-oss-120b (Low) para seu caso de uso.
Mais rápido
Velocidade de saída
14 provedores no total
Menor latência
Tempo até o primeiro token da resposta final
14 provedores no total
Menor preço
Preço combinado (por 1M de tokens)
14 provedores no total
gpt-oss-120b (low) está disponível em 14 provedores de API, cada um com características de desempenho e preços diferentes. Veja abaixo uma comparação das principais métricas entre os provedores.
- Em velocidade de saída, os principais provedores são Cerebras (1,694.2 t/s), SambaNova (741.7 t/s) e Groq (468.8 t/s). A velocidade varia significativamente entre os provedores, com uma diferença de 3101% entre o mais rápido e o mais lento.
- Em latência, Cerebras (1.56s), SambaNova (3.80s) e Groq (4.90s) têm o menor tempo até o primeiro token da resposta final.
- Em preço, CoreWeave (0.04), DeepInfra (0.05) e Crusoe (0.07) têm os menores preços combinados por 1M de tokens. Os preços variam em até 8.9x entre os provedores.
- Cerebras oferece o melhor desempenho, com a maior velocidade e a menor latência. Para otimizar os custos, CoreWeave tem o preço mais competitivo.
Atualização: A carga de trabalho padrão do benchmarking de desempenho passou a usar 10k tokens de entrada para representar melhor os casos de uso em produção. Você ainda pode selecionar outras cargas de trabalho acima.
Preços
Preços: acertos de cache, entrada e saída
Custo por tarefa do Intelligence Index
Velocidade de saída vs. preço
Velocidade
Medida pela velocidade de saída (tokens por segundo)
Velocidade de saída: gpt-oss-120b (Low)
Tempo por tarefa do Intelligence Index
Custo por tarefa vs. tempo por tarefa
Latência
Medida pelo tempo (segundos) até o primeiro token
Tempo até o primeiro token da resposta final
Comportamento do cache
Taxa de acertos do cache
Custo por tarefa vs. Taxa de acertos do cache
Tempo de resposta de ponta a ponta
Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed
Tempo de resposta de ponta a ponta
Principais métricas de comparação e recursos da API
128k | Aberto | -- | 368 | 0.90 | 7.69 | 5.43 | |||
131k | Aberto | -- | 742 | 1.10 | 4.47 | 2.69 | |||
131k | Aberto | -- | 129 | 1.77 | 21.13 | 15.49 | |||
131k | Aberto | -- | 470 | 0.71 | 6.03 | 4.26 | |||
131k | Aberto | -- | 265 | 0.46 | 9.89 | 7.54 | |||
131k | Aberto | -- | 48 | 0.64 | 52.71 | 41.65 | |||
131k | Aberto | -- | 73 | 1.23 | 35.28 | 27.24 | |||
131k | Aberto | -- | 1,795 | 0.36 | 1.75 | 1.11 | |||
131k | Aberto | -- | 418 | 0.73 | 6.71 | 4.78 | |||
128k | Aberto | -- | 193 | 0.21 | 13.13 | 10.34 | |||
131k | Aberto | -- | 108 | 1.11 | 24.34 | 18.59 | |||
131k | Aberto | -- | 300 | 0.89 | 9.22 | 6.66 | |||
131k | Aberto | -- | 101 | 0.51 | 25.27 | 19.80 | |||
131k | Aberto | -- | 238 | 0.97 | 11.46 | 8.39 | |||
Perguntas frequentes
Perguntas comuns sobre os provedores do gpt-oss-120b (Low)
gpt-oss-120b (Low) está disponível em 14 provedores de API: Nebius Base, SambaNova, Google Vertex, Groq, Crusoe, DeepInfra, CoreWeave, Cerebras, Azure, Baseten, Amazon, Parasail, Together AI e Novita. Cada provedor oferece características de desempenho e preços diferentes.
Atualmente, o gpt-oss-120b (Low) está disponível em 14 provedores de API que avaliamos e acompanhamos.
Todos os 14 provedores do gpt-oss-120b (Low) são compatíveis com o modo JSON para saída estruturada.
Todos os 14 provedores do gpt-oss-120b (Low) são compatíveis com chamadas de funções (uso de ferramentas).
Ao escolher um provedor para o gpt-oss-120b (Low), considere a velocidade de saída (para tarefas que exigem alta vazão), a latência (para aplicações interativas que precisam de respostas iniciais rápidas), o preço (para cargas de trabalho atentas aos custos) e os recursos da API, como modo JSON e chamadas de funções.
Sim. O desempenho dos provedores pode variar ao longo do tempo devido a mudanças na infraestrutura, balanceamento de carga e atualizações. Avaliamos continuamente todos os provedores e exibimos as tendências históricas de desempenho nos gráficos de evolução ao longo do tempo.
Para saber mais sobre a inteligência, as capacidades e as modalidades do gpt-oss-120b (Low), além de como ele se compara a outros modelos, consulte a página de visão geral do modelo. Ver visão geral do modelo