Nemotron 3.5 Lightning Benchmarking e análise de provedores de API
Esta análise ajuda você a escolher o melhor provedor de API de Nemotron 3.5 Lightning para seu caso de uso.
Mais rápido
Fireworks (BF16)
Crusoe (BF16)
Nebius (BF16)
CoreWeave (BF16)Velocidade de saída
6 provedores no total
Menor latência
Fireworks (BF16)Crusoe (BF16)Nebius (BF16)CoreWeave (BF16)Tempo até o primeiro token da resposta final
6 provedores no total
Menor preço
Fireworks (BF16)Crusoe (BF16)Nebius (BF16)CoreWeave (BF16)
DeepInfra (NVFP4)Preço combinado (por 1M de tokens)
6 provedores no total
Nemotron 3.5 Lightning está disponível em 6 provedores de API, cada um com características de desempenho e preços diferentes. Veja abaixo uma comparação das principais métricas entre os provedores.
- Em velocidade de saída, os principais provedores são Fireworks (BF16) (428.1 t/s), Crusoe (BF16) (304.6 t/s) e Nebius (BF16) (267.2 t/s). A velocidade varia significativamente entre os provedores, com uma diferença de 208% entre o mais rápido e o mais lento.
- Em latência, Fireworks (BF16) (5.14s), Crusoe (BF16) (7.02s) e Nebius (BF16) (8.48s) têm o menor tempo até o primeiro token da resposta final.
- Em preço, Fireworks (BF16) (0.04), Crusoe (BF16) (0.05) e Nebius (BF16) (0.08) têm os menores preços combinados por 1M de tokens. Os preços variam em até 4.1x entre os provedores.
- Fireworks (BF16) se destaca na liderança geral, ocupando o primeiro lugar nas três categorias: velocidade, latência e preço.
Destaques
Atualização: A carga de trabalho padrão do benchmarking de desempenho passou a usar 10k tokens de entrada para representar melhor os casos de uso em produção. Você ainda pode selecionar outras cargas de trabalho acima.
Preços
Pricing: Cache Hit, Input, and Output
Pricing: Blended Price
Pricing: Cache Discount
Output Speed vs. Price
Velocidade
Medida pela velocidade de saída (tokens por segundo)
Output Speed: Nemotron 3.5 Lightning
Latency vs. Output Speed
Latência
Medida pelo tempo (segundos) até o primeiro token
Tempo até o primeiro token da resposta final
Tempo de resposta de ponta a ponta
Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed
Tempo de resposta de ponta a ponta
Principais métricas de comparação e recursos da API
Perguntas frequentes
Perguntas comuns sobre os provedores do Nemotron 3.5 Lightning
Nemotron 3.5 Lightning está disponível em 6 provedores de API: DeepInfra (NVFP4), Nebius (BF16), CoreWeave (BF16), Fireworks (BF16), Crusoe (BF16) e Bitdeer AI (BF16). Cada provedor oferece características de desempenho e preços diferentes.
Atualmente, o Nemotron 3.5 Lightning está disponível em 6 provedores de API que avaliamos e acompanhamos.
Os provedores mais rápidos para o Nemotron 3.5 Lightning em velocidade de saída são Fireworks (BF16) (428.1 t/s), Crusoe (BF16) (304.6 t/s) e Nebius (BF16) (267.2 t/s). A velocidade de saída mede a rapidez com que os tokens são gerados depois que o modelo começa a responder.
Os provedores com o menor tempo até o primeiro token da resposta final para o Nemotron 3.5 Lightning são Fireworks (BF16) (5.14s), Crusoe (BF16) (7.02s) e Nebius (BF16) (8.48s). Uma latência menor significa um tempo de resposta inicial mais rápido.
Os provedores mais acessíveis para o Nemotron 3.5 Lightning em preço combinado são Fireworks (BF16) ($0.04 por 1M de tokens), Crusoe (BF16) ($0.05 por 1M de tokens) e Nebius (BF16) ($0.08 por 1M de tokens). O preço combinado usa uma proporção de 7:2:1 entre tokens de acerto do cache, entrada e saída.
Os provedores com o menor preço de tokens de entrada para o Nemotron 3.5 Lightning são Fireworks (BF16) ($0.05 por 1M de tokens de entrada), Crusoe (BF16) ($0.05 por 1M de tokens de entrada) e Nebius (BF16) ($0.06 por 1M de tokens de entrada).
Os provedores com o menor preço de tokens de saída para o Nemotron 3.5 Lightning são DeepInfra (NVFP4) ($0.20 por 1M de tokens de saída), Fireworks (BF16) ($0.20 por 1M de tokens de saída) e Crusoe (BF16) ($0.20 por 1M de tokens de saída).
Os preços do Nemotron 3.5 Lightning variam em até 4.1x entre os provedores. O mais acessível é Fireworks (BF16), com $0.04 por 1M de tokens, enquanto Bitdeer AI (BF16) cobra $0.15 por 1M de tokens.
A velocidade de saída do Nemotron 3.5 Lightning varia significativamente entre os provedores. Fireworks (BF16) é o mais rápido, com 428.1 t/s, 3.1x mais rápido que CoreWeave (BF16), com 138.8 t/s.
Todos os 6 provedores do Nemotron 3.5 Lightning são compatíveis com o modo JSON para saída estruturada.
5 de 6 provedores são compatíveis com chamadas de funções para o Nemotron 3.5 Lightning: DeepInfra (NVFP4), Nebius (BF16), CoreWeave (BF16), Fireworks (BF16) e Bitdeer AI (BF16).
Fireworks (BF16) lidera em todas as principais métricas do Nemotron 3.5 Lightning, com a maior velocidade, a menor latência e o preço mais competitivo.
Ao escolher um provedor para o Nemotron 3.5 Lightning, considere a velocidade de saída (para tarefas que exigem alta vazão), a latência (para aplicações interativas que precisam de respostas iniciais rápidas), o preço (para cargas de trabalho atentas aos custos) e os recursos da API, como modo JSON e chamadas de funções.
Sim. O desempenho dos provedores pode variar ao longo do tempo devido a mudanças na infraestrutura, balanceamento de carga e atualizações. Avaliamos continuamente todos os provedores e exibimos as tendências históricas de desempenho nos gráficos de evolução ao longo do tempo.
Para saber mais sobre a inteligência, as capacidades e as modalidades do Nemotron 3.5 Lightning, além de como ele se compara a outros modelos, consulte a página de visão geral do modelo. Ver visão geral do modelo