•

Open weights model

•

Released 2024年12月

Llama 3.3 Instruct 70B APIプロバイダーのベンチマークと分析

モデル比較

この分析は、ユースケースに最適なLlama 3.3 Instruct 70BのAPIプロバイダーを選ぶための参考情報です。

最速

#1
GroqGroq
320.1 t/s
#2
SambaNovaSambaNova
304.6 t/s
#3
AzureAzure
128.8 t/s
#4
CoreWeaveCoreWeave
93.5 t/s
#5
ScalewayScaleway
82.3 t/s

出力速度

プロバイダー合計:10社

最短の遅延

#1
GroqGroq
0.85 s
#2
CoreWeaveCoreWeave
0.88 s
#3
ScalewayScaleway
1.31 s
#4
NovitaNovita
1.73 s
#5
Together AI TurboTogether AI Turbo
1.87 s

最初のトークンまでの時間

プロバイダー合計:10社

最安料金

#1
DeepInfra (Turbo, FP8)DeepInfra (Turbo, FP8)
$0.12
#2
NovitaNovita
$0.16
#3
Parasail (FP8)Parasail (FP8)
$0.17
#4
GroqGroq
$0.61
#5
SambaNovaSambaNova
$0.66

ブレンド料金(100万トークンあたり)

プロバイダー合計:10社

Llama 3.3 70Bは10社のAPIプロバイダーで利用でき、性能特性と料金はそれぞれ異なります。以下でプロバイダー間の主要指標を比較します。

  • 出力速度の上位プロバイダーはGroq(320.1 t/s)、SambaNova(304.6 t/s)、Azure(128.8 t/s)です。 プロバイダー間の速度差は大きく、最速と最遅で1668%の差があります。
  • 遅延では、Groq(0.85秒)、CoreWeave(0.88秒)、Scaleway(1.31秒)の最初のトークンまでの時間が最短です。
  • 料金では、DeepInfra (Turbo, FP8)(0.12)、Novita(0.16)、Parasail (FP8)(0.17)の100万トークンあたりのブレンド料金が最安です。 プロバイダー間で料金に最大8.6倍の差があります。
  • Groqは出力速度が最も速く、遅延も最短で、性能が最も優れています。費用を最適化するなら、DeepInfra (Turbo, FP8)の料金が最も競争力に優れています。
Output tokens per second · Higher is better
Seconds to first answer token received · Lower is better
USD per 1M tokens (blended) · Lower is better

更新:本番環境のユースケースをより適切に反映するため、性能ベンチマークのデフォルトワークロードを入力10kトークンに変更しました。上部で別のワークロードを引き続き選択できます。

料金

料金:キャッシュヒット・入力・出力

Price (USD per M Tokens) · Lower is better · 10,000 input tokens

Intelligence Index タスクあたりのコスト

Weighted average cost (USD) per Intelligence Index task · Segmented by token type · Lower is better
No data available

出力速度と料金

Blended at 7:2:1 (cache-input-output) · Output speed: output tokens per second · USD per 1M tokens (blended)
Most attractive quadrant
Pareto line

速度

出力速度(1秒あたりのトークン数)で測定

出力速度: Llama 3.3 Instruct 70B

出力速度:毎秒の出力トークン数 · 10,000 input tokens

Intelligence Indexのタスクあたりの時間

Weighted average decode time (minutes) per Intelligence Index task · Excludes TTFT and overhead time · Lower is better
No data available

タスクあたりの費用とタスクあたりの時間

Weighted average cost (USD) per Intelligence Index task · Weighted average decode time (minutes) per Intelligence Index task
Most attractive quadrant
No data available

遅延

最初のトークンまでの時間(秒)で測定

最初のトークンまでの時間

Seconds to first token received · Lower is better · 10,000 input tokens

キャッシュ動作

キャッシュヒット率

キャッシュ可能な入力トークンのうちキャッシュから提供された割合 · 直近4週間の中央値、2026年9月26日更新

タスクあたりのコストとキャッシュヒット率

Weighted average cost (USD) per Intelligence Index task · Cache hit rate: median of the last four weeks, updated Sep 26, 2026
Most attractive quadrant
No data available

エンドツーエンド応答時間

Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed

エンドツーエンド応答時間

Seconds to output 500 tokens, including reasoning model 'thinking' time · Lower is better · 10,000 input tokens

主要な比較指標とAPI機能

GoogleのロゴGoogle
128k
オープン
--
145
0.69
4.14
--
GroqのロゴGroq
131k
オープン
--
305
0.93
2.57
--
NovitaのロゴNovita
131k
オープン
--
41
1.74
13.94
--
SambaNovaのロゴSambaNova
128k
オープン
--
306
1.98
3.62
--
ParasailのロゴParasail
131k
オープン
--
81
2.31
8.51
--
CoreWeaveのロゴCoreWeave
128k
オープン
--
93
0.84
6.22
--
Together AIのロゴTogether AI
131k
オープン
--
64
1.83
9.67
--
Microsoft AzureのロゴMicrosoft Azure
128k
オープン
--
130
2.10
5.95
--
DeepInfraのロゴDeepInfra
131k
オープン
--
17
2.14
32.02
--
Amazon BedrockのロゴAmazon Bedrock
128k
オープン
--
--
--
--
--
ScalewayのロゴScaleway
100k
オープン
--
79
1.35
7.66
--

よくある質問

Llama 3.3 Instruct 70Bのプロバイダーに関するよくある質問