Replicate: Intelligenz, Leistung und Preise der Modelle

Replicate
Replicate

Diese Analyse soll Sie bei der Auswahl des besten von Replicate angebotenen Modells für Ihren Anwendungsfall unterstützen.

Höchste Intelligenz

Intelligence Index

Insgesamt 2 Modelle

Kürzeste Zeit pro Aufgabe

Zeit pro Aufgabe des Intelligence Index (Minuten)

Insgesamt 2 Modelle

Niedrigster Preis

#1
Llama 3 8BLlama 3 8B
$0.07
#2
Llama 3 70BLlama 3 70B
$0.86

Mischpreis (pro 1 Mio. Tokens)

Insgesamt 2 Modelle

Replicate bietet 2 Modelle mit jeweils unterschiedlichen Merkmalen bei Intelligenz, Leistung und Preis an. Nachfolgend werden die wichtigsten Metriken der Modelle verglichen.

  • Bei der Latenz bieten Llama 3 8B (0.59 s) und Llama 3 70B (0.62 s) die kürzeste Zeit bis zum ersten Antworttoken.
  • Beim Preis bieten Llama 3 8B ($0.07) und Llama 3 70B ($0.86) die niedrigsten Mischpreise pro 1 Mio. Tokens.
  • Bei der Größe des Kontextfensters unterstützen Llama 3 8B (8k) und Llama 3 70B (8k) die größten Kontextfenster von Replicate.
Artificial Analysis Intelligence Index · Higher is better
No data available
Inference time (minutes) per Intelligence Index task · Lower is better
No data available
USD per 1M tokens (blended) · Lower is better

Intelligenz

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v5.0.1 incorporates 9 evaluations: AA-Briefcase v1.1, AutomationBench-AA, Terminal-Bench 4.0, FrontierCode-AA 2.0, AA-Omniscience v1.1, GDP.pdf, HLE-Diamond, CritPt v2 (Hard Subset), and Terminal-Bench-Science 0.1
No data available

Evaluations

Evaluations measured independently by Artificial Analysis · AA-PersonalityBench scores are percentile ranks from 1 to 100
Mehr anzeigen

Agentic knowledge work, Elo

No data available
No data available
No data available

Agentic SaaS workflows

No data available

Agentic scientific research workflows in a terminal

No data available

Agentic software engineering in open-source repositories

No data available

Reasoning & knowledge

No data available

Professional document reasoning, All-pass

No data available

Agentic coding & terminal use

No data available

Physics reasoning

No data available

Quantitative analysis on spreadsheets & documents

No data available

Legal agentic work, Hallucination-Gated All-Pass Rate

No data available

Agentic business operations

No data available

Agentic real-world work tasks, Elo

No data available

Agentic interactive 3D experiences, Elo

No data available

Product and brand videos designed in code, Elo

No data available

Kubernetes incident root-cause analysis

No data available

Medical long context reasoning

No data available

Visual reasoning

No data available

Rich, varied, well-crafted language

No data available

Well-structured, scannable, answer-first

No data available

Truthful, acknowledges uncertainty, non-sycophantic

No data available

Use of filler and generic language

No data available

Intelligence Index vs. Preis

Blended at 7:2:1 (cache-input-output) · USD per 1M tokens (blended)
Most attractive quadrant
No data available

Preise

Kosten pro Aufgabe des Intelligence Index

Weighted average cost (USD) per Intelligence Index task · Segmented by token type · Lower is better
No data available

Intelligence Index vs. Preis

Blended at 7:2:1 (cache-input-output) · USD per 1M tokens (blended)
Most attractive quadrant
No data available

Geschwindigkeit

Durchschnitt der gemessenen Workloads mit einzelnen Anfragen und agentischen Multi-Turn-Sitzungen

Ausgabegeschwindigkeit

Ausgabetokens geteilt durch die gesamte Anfragezeit · Einschließlich Zeit bis zum ersten Token · Durchschnitt der gemessenen Workloads mit einzelnen Anfragen und agentischen Multi-Turn-Sitzungen · Höher ist besser

Qualität

Kontextfenster

Context window: tokens limit · Higher is better

Latenz

Durchschnitt der gemessenen Workloads mit einzelnen Anfragen und agentischen Multi-Turn-Sitzungen

Zeit bis zum ersten Antworttoken

Sekunden bis zum ersten Antworttoken nach etwaigem Reasoning · Durchschnitt der gemessenen Workloads mit einzelnen Anfragen und agentischen Multi-Turn-Sitzungen · Niedriger ist besser

Zuverlässigkeit

Anteil der fehlgeschlagenen Anfragen des Endpunkts über alle gemessenen Workloads mit einzelnen Anfragen und agentischen Multi-Turn-Sitzungen

Endpunkt-Fehlerrate

Anteil der Anfragen mit Fehler, Ratenlimit oder Zeitüberschreitung des Endpunkts · Über alle gemessenen Workloads mit einzelnen Anfragen und agentischen Multi-Turn-Sitzungen · Niedriger ist besser

Weitere Analyse
Logo von Meta
Llama 3 8B
--
--
--
0.49
16.7%
8k
Offen
Logo von Meta
Llama 3 70B
--
--
--
0.65
0.0%
8k
Offen

Wichtige Definitionen

Häufig gestellte Fragen

Häufige Fragen zu Replicate