NVIDIA Nemotron Nano 12B v2 VL (Non-reasoning) APIプロバイダーのベンチマークと分析
NVIDIA Nemotron Nano 12B v2 VL (Non-reasoning)のAPIプロバイダーを、遅延(最初のトークンまでの時間)、出力速度(1秒あたりの出力トークン数)、料金などの性能指標で分析します。ベンチマーク対象のAPIプロバイダーにはAmazon Bedrock、DeepInfra (FP8)が含まれます。
最速
出力速度
プロバイダー合計:2社
最短の遅延
最初のトークンまでの時間
プロバイダー合計:2社
最安料金
ブレンド料金(100万トークンあたり)
プロバイダー合計:2社
NVIDIA Nemotron Nano 12B v2 VLは2社のAPIプロバイダーで利用でき、性能特性と料金はそれぞれ異なります。以下でプロバイダー間の主要指標を比較します。
- 出力速度の上位プロバイダーはAmazon(209.6 t/s)、DeepInfra (FP8)(87.1 t/s)です。
- 遅延では、Amazon(1.11秒)、DeepInfra (FP8)(5.54秒)の最初のトークンまでの時間が最短です。
- 料金では、Amazon(0.24)、DeepInfra (FP8)(0.24)の100万トークンあたりのブレンド料金が最安です。
- Amazonは速度、遅延、料金の3カテゴリすべてで首位となり、総合トップです。
ハイライト
更新:本番環境のユースケースをより適切に反映するため、性能ベンチマークのデフォルトワークロードを入力10kトークンに変更しました。上部で別のワークロードを引き続き選択できます。
料金
Pricing: Cache Hit, Input, and Output
Pricing: Blended Price
Output Speed vs. Price
速度
出力速度(1秒あたりのトークン数)で測定
Output Speed: NVIDIA Nemotron Nano 12B v2 VL (Non-reasoning)
Latency vs. Output Speed
遅延
最初のトークンまでの時間(秒)で測定
最初のトークンまでの時間:NVIDIA Nemotron Nano 12B v2 VLのプロバイダー
エンドツーエンド応答時間
Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed
エンドツーエンド応答時間:NVIDIA Nemotron Nano 12B v2 VLのプロバイダー
主要な比較指標とAPI機能
よくある質問
NVIDIA Nemotron Nano 12B v2 VL (Non-reasoning)のプロバイダーに関するよくある質問
NVIDIA Nemotron Nano 12B v2 VL (Non-reasoning)は2社のAPIプロバイダーで利用できます:Amazon、DeepInfra (FP8)。性能特性と料金はプロバイダーごとに異なります。
現在、ベンチマークと追跡の対象となる2社のAPIプロバイダーでNVIDIA Nemotron Nano 12B v2 VL (Non-reasoning)を利用できます。
出力速度でNVIDIA Nemotron Nano 12B v2 VL (Non-reasoning)が最速のプロバイダーはAmazon(209.6 t/s)、DeepInfra (FP8)(87.1 t/s)です。出力速度は、モデルが応答を開始した後にトークンを生成する速さを表します。
NVIDIA Nemotron Nano 12B v2 VL (Non-reasoning)の最初のトークンまでの時間が最短のプロバイダーはAmazon(1.11s)、DeepInfra (FP8)(5.54s)です。遅延が短いほど、最初の応答が速くなります。
ブレンド料金でNVIDIA Nemotron Nano 12B v2 VL (Non-reasoning)が最安のプロバイダーはAmazon(100万トークンあたり$0.24)、DeepInfra (FP8)(100万トークンあたり$0.24)です。ブレンド料金では、キャッシュヒット/入力/出力トークンを7:2:1とします。
NVIDIA Nemotron Nano 12B v2 VL (Non-reasoning)の入力トークン料金が最安のプロバイダーはAmazon(入力100万トークンあたり$0.20)、DeepInfra (FP8)(入力100万トークンあたり$0.20)です。
NVIDIA Nemotron Nano 12B v2 VL (Non-reasoning)の出力トークン料金が最安のプロバイダーはAmazon(出力100万トークンあたり$0.60)、DeepInfra (FP8)(出力100万トークンあたり$0.60)です。
NVIDIA Nemotron Nano 12B v2 VL (Non-reasoning)の出力速度はプロバイダーによって大きく異なります。Amazonが209.6 t/sで最速であり、DeepInfra (FP8)の87.1 t/sと比べて2.4倍高速です。
2社中1社のプロバイダーがNVIDIA Nemotron Nano 12B v2 VL (Non-reasoning)のJSONモードに対応しています:DeepInfra (FP8)。
NVIDIA Nemotron Nano 12B v2 VL (Non-reasoning)を提供する2社すべてが、関数呼び出し(ツール利用)に対応しています。
AmazonはNVIDIA Nemotron Nano 12B v2 VL (Non-reasoning)の主要指標すべてで首位となり、出力速度が最も速く、遅延が最も短く、料金の競争力も最も優れています。
NVIDIA Nemotron Nano 12B v2 VL (Non-reasoning)のプロバイダーを選ぶ際は、出力速度(高スループットが必要なタスク)、遅延(最初の応答の速さが必要な対話型アプリケーション)、料金(費用を重視するワークロード)、JSONモードや関数呼び出しなどのAPI機能を検討してください。
はい。インフラストラクチャの変更、負荷分散、アップデートにより、プロバイダーの性能は時間とともに変化する場合があります。すべてのプロバイダーを継続的にベンチマークし、「推移」グラフに過去の性能傾向を表示しています。
NVIDIA Nemotron Nano 12B v2 VL (Non-reasoning)の知能、能力、モダリティ、他のモデルとの比較については、モデル概要ページをご覧ください。 モデル概要を表示