Nemotron 3 Super 120B A12B (Reasoning) Benchmarking e análise de provedores de API
Esta análise ajuda você a escolher o melhor provedor de API de Nemotron 3 Super 120B A12B (Reasoning) para seu caso de uso.
Mais rápido
Nebius
Crusoe (FP8)
DeepInfraVelocidade de saída
3 provedores no total
Menor latência
NebiusCrusoe (FP8)DeepInfraTempo até o primeiro token da resposta final
3 provedores no total
Menor preço
DeepInfraNebiusCrusoe (FP8)Preço combinado (por 1M de tokens)
3 provedores no total
Nemotron 3 Super está disponível em 3 provedores de API, cada um com características de desempenho e preços diferentes. Veja abaixo uma comparação das principais métricas entre os provedores.
- Em velocidade de saída, os principais provedores são Nebius (207.9 t/s), Crusoe (FP8) (156.8 t/s) e DeepInfra (71.8 t/s).
- Em latência, Nebius (10.94s), Crusoe (FP8) (13.30s) e DeepInfra (38.69s) têm o menor tempo até o primeiro token da resposta final.
- Em preço, DeepInfra (0.12), Nebius (0.36) e Crusoe (FP8) (0.40) têm os menores preços combinados por 1M de tokens.
- Nebius oferece o melhor desempenho, com a maior velocidade e a menor latência. Para otimizar os custos, DeepInfra tem o preço mais competitivo.
Atualização: A carga de trabalho padrão do benchmarking de desempenho passou a usar 10k tokens de entrada para representar melhor os casos de uso em produção. Você ainda pode selecionar outras cargas de trabalho acima.
Preços
Preços: acertos de cache, entrada e saída
Preços: Preço combinado
Preços: Desconto de cache
Velocidade de saída vs. preço
Velocidade
Medida pela velocidade de saída (tokens por segundo)
Velocidade de saída: Nemotron 3 Super 120B A12B (Reasoning)
Latência vs. velocidade de saída
Latência
Medida pelo tempo (segundos) até o primeiro token
Tempo até o primeiro token da resposta final
Tempo de resposta de ponta a ponta
Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed
Tempo de resposta de ponta a ponta
Principais métricas de comparação e recursos da API
Perguntas frequentes
Perguntas comuns sobre os provedores do Nemotron 3 Super 120B A12B (Reasoning)
Nemotron 3 Super 120B A12B (Reasoning) está disponível em 3 provedores de API: Crusoe (FP8), Nebius e DeepInfra. Cada provedor oferece características de desempenho e preços diferentes.
Atualmente, o Nemotron 3 Super 120B A12B (Reasoning) está disponível em 3 provedores de API que avaliamos e acompanhamos.
Os provedores mais rápidos para o Nemotron 3 Super 120B A12B (Reasoning) em velocidade de saída são Nebius (207.9 t/s), Crusoe (FP8) (156.8 t/s) e DeepInfra (71.8 t/s). A velocidade de saída mede a rapidez com que os tokens são gerados depois que o modelo começa a responder.
Os provedores com o menor tempo até o primeiro token da resposta final para o Nemotron 3 Super 120B A12B (Reasoning) são Nebius (10.94s), Crusoe (FP8) (13.30s) e DeepInfra (38.69s). Uma latência menor significa um tempo de resposta inicial mais rápido.
Os provedores mais acessíveis para o Nemotron 3 Super 120B A12B (Reasoning) em preço combinado são DeepInfra ($0.12 por 1M de tokens), Nebius ($0.36 por 1M de tokens) e Crusoe (FP8) ($0.40 por 1M de tokens). O preço combinado usa uma proporção de 7:2:1 entre tokens de acerto do cache, entrada e saída.
Os provedores com o menor preço de tokens de entrada para o Nemotron 3 Super 120B A12B (Reasoning) são DeepInfra ($0.09 por 1M de tokens de entrada), Crusoe (FP8) ($0.30 por 1M de tokens de entrada) e Nebius ($0.30 por 1M de tokens de entrada).
Os provedores com o menor preço de tokens de saída para o Nemotron 3 Super 120B A12B (Reasoning) são DeepInfra ($0.40 por 1M de tokens de saída), Nebius ($0.90 por 1M de tokens de saída) e Crusoe (FP8) ($2.40 por 1M de tokens de saída).
Os preços do Nemotron 3 Super 120B A12B (Reasoning) variam em até 3.5x entre os provedores. O mais acessível é DeepInfra, com $0.12 por 1M de tokens, enquanto Crusoe (FP8) cobra $0.40 por 1M de tokens.
Todos os 3 provedores do Nemotron 3 Super 120B A12B (Reasoning) são compatíveis com o modo JSON para saída estruturada.
Todos os 3 provedores do Nemotron 3 Super 120B A12B (Reasoning) são compatíveis com chamadas de funções (uso de ferramentas).
Ao escolher um provedor para o Nemotron 3 Super 120B A12B (Reasoning), considere a velocidade de saída (para tarefas que exigem alta vazão), a latência (para aplicações interativas que precisam de respostas iniciais rápidas), o preço (para cargas de trabalho atentas aos custos) e os recursos da API, como modo JSON e chamadas de funções.
Sim. O desempenho dos provedores pode variar ao longo do tempo devido a mudanças na infraestrutura, balanceamento de carga e atualizações. Avaliamos continuamente todos os provedores e exibimos as tendências históricas de desempenho nos gráficos de evolução ao longo do tempo.
Para saber mais sobre a inteligência, as capacidades e as modalidades do Nemotron 3 Super 120B A12B (Reasoning), além de como ele se compara a outros modelos, consulte a página de visão geral do modelo. Ver visão geral do modelo