NVIDIA Nemotron Nano 9B V2 (Non-reasoning) Benchmarking e análise de provedores de API

NVIDIA Nemotron Nano 9B V2 (Non-reasoning) está disponível em 2 provedores de API: DeepInfra e Amazon. Cada provedor oferece características de desempenho e preços diferentes.

Atualmente, o NVIDIA Nemotron Nano 9B V2 (Non-reasoning) está disponível em 2 provedores de API que avaliamos e acompanhamos.

Os provedores mais rápidos para o NVIDIA Nemotron Nano 9B V2 (Non-reasoning) em velocidade de saída são Amazon (166.4 t/s) e DeepInfra (16.2 t/s). A velocidade de saída mede a rapidez com que os tokens são gerados depois que o modelo começa a responder.

Os provedores com o menor tempo até o primeiro token para o NVIDIA Nemotron Nano 9B V2 (Non-reasoning) são Amazon (1.15s) e DeepInfra (51.13s). Uma latência menor significa um tempo de resposta inicial mais rápido.

Os provedores mais acessíveis para o NVIDIA Nemotron Nano 9B V2 (Non-reasoning) em preço combinado são DeepInfra ($0.05 por 1M de tokens) e Amazon ($0.08 por 1M de tokens). O preço combinado usa uma proporção de 7:2:1 entre tokens de acerto do cache, entrada e saída.

Os provedores com o menor preço de tokens de entrada para o NVIDIA Nemotron Nano 9B V2 (Non-reasoning) são DeepInfra ($0.04 por 1M de tokens de entrada) e Amazon ($0.06 por 1M de tokens de entrada).

Os provedores com o menor preço de tokens de saída para o NVIDIA Nemotron Nano 9B V2 (Non-reasoning) são DeepInfra ($0.16 por 1M de tokens de saída) e Amazon ($0.23 por 1M de tokens de saída).

Os preços do NVIDIA Nemotron Nano 9B V2 (Non-reasoning) variam em até 1.5x entre os provedores. O mais acessível é DeepInfra, com $0.05 por 1M de tokens, enquanto Amazon cobra $0.08 por 1M de tokens.

A velocidade de saída do NVIDIA Nemotron Nano 9B V2 (Non-reasoning) varia significativamente entre os provedores. Amazon é o mais rápido, com 166.4 t/s, 10.3x mais rápido que DeepInfra, com 16.2 t/s.

1 de 2 provedores são compatíveis com o modo JSON para o NVIDIA Nemotron Nano 9B V2 (Non-reasoning): DeepInfra.

Todos os 2 provedores do NVIDIA Nemotron Nano 9B V2 (Non-reasoning) são compatíveis com chamadas de funções (uso de ferramentas).

Para o NVIDIA Nemotron Nano 9B V2 (Non-reasoning), Amazon oferece o melhor desempenho, com a maior velocidade e a menor latência. Para otimizar os custos, DeepInfra tem o preço mais competitivo.

Ao escolher um provedor para o NVIDIA Nemotron Nano 9B V2 (Non-reasoning), considere a velocidade de saída (para tarefas que exigem alta vazão), a latência (para aplicações interativas que precisam de respostas iniciais rápidas), o preço (para cargas de trabalho atentas aos custos) e os recursos da API, como modo JSON e chamadas de funções.

Sim. O desempenho dos provedores pode variar ao longo do tempo devido a mudanças na infraestrutura, balanceamento de carga e atualizações. Avaliamos continuamente todos os provedores e exibimos as tendências históricas de desempenho nos gráficos de evolução ao longo do tempo.

Para saber mais sobre a inteligência, as capacidades e as modalidades do NVIDIA Nemotron Nano 9B V2 (Non-reasoning), além de como ele se compara a outros modelos, consulte a página de visão geral do modelo. Ver visão geral do modelo