Replicate:モデルの知能、性能、料金

Replicate
Replicate

この分析は、ユースケースに最適なReplicate提供モデルを選ぶための参考情報です。

最高の知能

Intelligence Index

モデル合計:2件

最短のタスク時間

Intelligence Index タスクあたりの時間(分)

モデル合計:2件

最安料金

#1
Llama 3 8BLlama 3 8B
$0.07
#2
Llama 3 70BLlama 3 70B
$0.86

ブレンド料金(100万トークンあたり)

モデル合計:2件

Replicateは2モデルを提供しており、知能、性能、料金の特性はそれぞれ異なります。 以下でモデル間の主要指標を比較します。

  • 遅延では、Llama 3 8B(0.51秒)、Llama 3 70B(0.60秒)の最初の回答トークンまでの時間が最短です。
  • 料金では、Llama 3 8B($0.07)、Llama 3 70B($0.86)の100万トークンあたりのブレンド料金が最安です。
  • Replicateで最大のコンテキストウィンドウに対応するモデルはLlama 3 8B(8k)、Llama 3 70B(8k)です。
Artificial Analysis Intelligence Index · Higher is better
No data available
Inference time (minutes) per Intelligence Index task · Lower is better
No data available
USD per 1M tokens (blended) · Lower is better

知能

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v5.0.1 incorporates 9 evaluations: AA-Briefcase v1.1, AutomationBench-AA, Terminal-Bench 4.0, FrontierCode-AA 2.0, AA-Omniscience v1.1, GDP.pdf, HLE-Diamond, CritPt v2 (Hard Subset), and Terminal-Bench-Science 0.1
No data available

Evaluations

Evaluations measured independently by Artificial Analysis · AA-PersonalityBench scores are percentile ranks from 1 to 100
もっと見る

Agentic knowledge work, Elo

No data available
No data available
No data available

Agentic SaaS workflows

No data available

Agentic scientific research workflows in a terminal

No data available

Agentic software engineering in open-source repositories

No data available

Reasoning & knowledge

No data available

Professional document reasoning, All-pass

No data available

Agentic coding & terminal use

No data available

Physics reasoning

No data available

Quantitative analysis on spreadsheets & documents

No data available

Legal agentic work, Hallucination-Gated All-Pass Rate

No data available

Agentic business operations

No data available

Agentic real-world work tasks, Elo

No data available

Agentic interactive 3D experiences, Elo

No data available

Product and brand videos designed in code, Elo

No data available

Kubernetes incident root-cause analysis

No data available

Medical long context reasoning

No data available

Visual reasoning

No data available

Rich, varied, well-crafted language

No data available

Well-structured, scannable, answer-first

No data available

Truthful, acknowledges uncertainty, non-sycophantic

No data available

Use of filler and generic language

No data available

Intelligence Indexと料金

Blended at 7:2:1 (cache-input-output) · USD per 1M tokens (blended)
Most attractive quadrant
No data available

料金

Intelligence Index タスクあたりのコスト

Weighted average cost (USD) per Intelligence Index task · Segmented by token type · Lower is better
No data available

Intelligence Indexと料金

Blended at 7:2:1 (cache-input-output) · USD per 1M tokens (blended)
Most attractive quadrant
No data available

速度

測定した単一リクエストとマルチターンのエージェントワークロードの平均

出力速度

出力トークンをリクエスト総時間で割った値 · 最初のトークンまでの時間を含む · 測定した単一リクエストとマルチターンのエージェントワークロードの平均 · 高いほど良い

品質

コンテキストウィンドウ

Context window: tokens limit · Higher is better

遅延

測定した単一リクエストとマルチターンのエージェントワークロードの平均

最初の回答トークンまでの時間

推論を経て最初の回答トークンが届くまでの秒数 · 測定した単一リクエストとマルチターンのエージェントワークロードの平均 · 低いほど良い

信頼性

測定したすべての単一リクエストとマルチターンのエージェントワークロードで、エンドポイントが失敗したリクエストの割合

エンドポイントのエラー率

エンドポイントがエラー、レート制限、タイムアウトで失敗したリクエストの割合 · 測定したすべての単一リクエストとマルチターンのエージェントワークロードが対象 · 低いほど良い

詳細分析
Metaのロゴ
Llama 3 8B
--
--
--
0.49
16.7%
8k
オープン
Metaのロゴ
Llama 3 70B
--
--
--
0.65
0.0%
8k
オープン

主要な定義

よくある質問

Replicateに関するよくある質問