このモデルは非推奨です。デフォルトの入力トークン数1万のワークロードでのみ性能測定を継続しています。他のワークロードの結果は過去のデータであり、更新されません。
Metaは新しいリリースであるLlama 3 Instruct 8Bを公開しています。こちらの利用をご検討ください。
この分析は、ユースケースに最適なLlama 2 Chat 7BのAPIプロバイダーを選ぶための参考情報です。
最速
出力速度
プロバイダー合計:1社
最短の遅延
最初のトークンまでの時間
プロバイダー合計:1社
最安料金
ブレンド料金(100万トークンあたり)
プロバイダー合計:1社
Llama 2 Chat 7BはReplicateで利用できます。
モデルの詳細と他のモデルとの知能比較は、Llama 2 Chat 7Bのモデルページをご覧ください。
料金
料金:キャッシュヒット・入力・出力
料金:ブレンド料金
出力速度と料金
速度
出力速度(1秒あたりのトークン数)で測定
出力速度: Llama 2 Chat 7B
遅延と出力速度
遅延
最初のトークンまでの時間(秒)で測定
最初のトークンまでの時間
エンドツーエンド応答時間
Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed
エンドツーエンド応答時間
主要な比較指標とAPI機能
4.1k | オープン | -- | -- | -- | -- | -- | |||
よくある質問
Llama 2 Chat 7Bのプロバイダーに関するよくある質問
Llama 2 Chat 7Bは1社のAPIプロバイダーで利用できます:Replicate。性能特性と料金はプロバイダーごとに異なります。
現在、ベンチマークと追跡の対象となる1社のAPIプロバイダーでLlama 2 Chat 7Bを利用できます。
ブレンド料金でLlama 2 Chat 7Bが最安のプロバイダーはReplicate(100万トークンあたり$0.07)です。ブレンド料金では、キャッシュヒット/入力/出力トークンを7:2:1とします。
Llama 2 Chat 7Bの入力トークン料金が最安のプロバイダーはReplicate(入力100万トークンあたり$0.05)です。
Llama 2 Chat 7Bの出力トークン料金が最安のプロバイダーはReplicate(出力100万トークンあたり$0.25)です。
Llama 2 Chat 7Bのプロバイダーを選ぶ際は、出力速度(高スループットが必要なタスク)、遅延(最初の応答の速さが必要な対話型アプリケーション)、料金(費用を重視するワークロード)、JSONモードや関数呼び出しなどのAPI機能を検討してください。
はい。インフラストラクチャの変更、負荷分散、アップデートにより、プロバイダーの性能は時間とともに変化する場合があります。すべてのプロバイダーを継続的にベンチマークし、「推移」グラフに過去の性能傾向を表示しています。
Llama 2 Chat 7Bの知能、能力、モダリティ、他のモデルとの比較については、モデル概要ページをご覧ください。 モデル概要を表示