gpt-oss-120b (High) Benchmarking e análise de provedores de API
Esta análise ajuda você a escolher o melhor provedor de API de gpt-oss-120b (High) para seu caso de uso.
Mais rápido
Velocidade de saída
16 provedores no total
Menor latência
Tempo até o primeiro token da resposta final
16 provedores no total
Menor preço
Preço combinado (por 1M de tokens)
16 provedores no total
gpt-oss-120b (high) está disponível em 16 provedores de API, cada um com características de desempenho e preços diferentes. Veja abaixo uma comparação das principais métricas entre os provedores.
- Em velocidade de saída, os principais provedores são Cerebras (1,693.7 t/s), SambaNova (701.2 t/s) e Groq (473.4 t/s). A velocidade varia significativamente entre os provedores, com uma diferença de 2995% entre o mais rápido e o mais lento.
- Em latência, Cerebras (1.56s), SambaNova (4.03s) e Groq (4.85s) têm o menor tempo até o primeiro token da resposta final.
- Em preço, CoreWeave (0.04), DeepInfra (0.05) e Novita (0.07) têm os menores preços combinados por 1M de tokens. Os preços variam em até 8.9x entre os provedores.
- Cerebras oferece o melhor desempenho, com a maior velocidade e a menor latência. Para otimizar os custos, CoreWeave tem o preço mais competitivo.
Atualização: A carga de trabalho padrão do benchmarking de desempenho passou a usar 10k tokens de entrada para representar melhor os casos de uso em produção. Você ainda pode selecionar outras cargas de trabalho acima.
Acurácia do endpoint
Endpoint Accuracy Index: gpt-oss-120b (High)
Preços
Preços: acertos de cache, entrada e saída
Custo por tarefa do Intelligence Index
Velocidade de saída vs. preço
Velocidade
Medida pela velocidade de saída (tokens por segundo)
Velocidade de saída: gpt-oss-120b (High)
Tempo por tarefa do Intelligence Index
Custo por tarefa vs. tempo por tarefa
Latência
Medida pelo tempo (segundos) até o primeiro token
Tempo até o primeiro token da resposta final
Comportamento do cache
Taxa de acertos do cache
Custo por tarefa vs. Taxa de acertos do cache
Tempo de resposta de ponta a ponta
Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed
Tempo de resposta de ponta a ponta
Principais métricas de comparação e recursos da API
86% | 131k | Aberto | -- | 472 | 0.69 | 5.99 | 4.23 | |||
97% | 128k | Aberto | $0.12 | 100 | 1.32 | 26.38 | 20.05 | |||
98% | 131k | Aberto | $0.02 | 102 | 1.28 | 25.81 | 19.62 | |||
91% | 131k | Aberto | $0.04 | 187 | 1.03 | 14.39 | 10.69 | |||
84% | 131k | Aberto | $0.11 | 47 | 0.66 | 53.37 | 42.17 | |||
93% | 131k | Aberto | $0.11 | 369 | 0.74 | 7.51 | 5.42 | |||
97% | 131k | Aberto | $0.03 | 50 | 0.65 | 51.01 | 40.29 | |||
87% | 131k | Aberto | $0.23 | 1,748 | 0.36 | 1.79 | 1.14 | |||
72% | 131k | Aberto | $0.06 | 185 | 0.95 | 14.50 | 10.84 | |||
77% | 131k | Aberto | $0.11 | 98 | 0.57 | 26.02 | 20.36 | |||
n/d | 131k | Aberto | $0.04 | 348 | 0.44 | 7.62 | 5.74 | |||
n/d | 128k | Aberto | $0.07 | 213 | 0.18 | 11.89 | 9.37 | |||
98% | 131k | Aberto | $0.15 | 708 | 1.14 | 4.67 | 2.82 | |||
98% | 131k | Aberto | $0.06 | 287 | 0.82 | 9.53 | 6.97 | |||
97% | 128k | Aberto | $0.11 | 367 | 0.91 | 7.73 | 5.46 | |||
101% | 131k | Aberto | $0.11 | 96 | 1.01 | 26.92 | 20.73 | |||
Perguntas frequentes
Perguntas comuns sobre os provedores do gpt-oss-120b (High)
gpt-oss-120b (High) está disponível em 16 provedores de API: Groq, Scaleway, CoreWeave, Novita, DeepInfra (Turbo), Azure, DeepInfra, Cerebras, Google Vertex, Together AI, Crusoe, Baseten, SambaNova, Parasail, Nebius (Base) e Amazon. Cada provedor oferece características de desempenho e preços diferentes.
Atualmente, o gpt-oss-120b (High) está disponível em 16 provedores de API que avaliamos e acompanhamos.
A velocidade de saída do gpt-oss-120b (High) varia significativamente entre os provedores. Cerebras é o mais rápido, com 1,693.7 t/s, 30.9x mais rápido que DeepInfra (Turbo), com 54.7 t/s.
Todos os 16 provedores do gpt-oss-120b (High) são compatíveis com o modo JSON para saída estruturada.
Todos os 16 provedores do gpt-oss-120b (High) são compatíveis com chamadas de funções (uso de ferramentas).
Ao escolher um provedor para o gpt-oss-120b (High), considere a velocidade de saída (para tarefas que exigem alta vazão), a latência (para aplicações interativas que precisam de respostas iniciais rápidas), o preço (para cargas de trabalho atentas aos custos) e os recursos da API, como modo JSON e chamadas de funções.
Sim. O desempenho dos provedores pode variar ao longo do tempo devido a mudanças na infraestrutura, balanceamento de carga e atualizações. Avaliamos continuamente todos os provedores e exibimos as tendências históricas de desempenho nos gráficos de evolução ao longo do tempo.
Para saber mais sobre a inteligência, as capacidades e as modalidades do gpt-oss-120b (High), além de como ele se compara a outros modelos, consulte a página de visão geral do modelo. Ver visão geral do modelo