Baseten: Intelligenz, Leistung und Preise der Modelle

Baseten
Baseten

Analyse der Modelle von Baseten anhand zentraler Metriken wie Qualität, Preis, Ausgabegeschwindigkeit, Latenz, Kontextfenster und mehr. Diese Analyse soll Sie bei der Auswahl des besten von Baseten angebotenen Modells für Ihren Anwendungsfall unterstützen.

Höchste Intelligenz

#1
GLM-5.2 (max)
GLM-5.2 (max)
51
#2
DeepSeek V4 Pro (high)
DeepSeek V4 Pro (high)
43
#3
GLM-4.7
GLM-4.7
34
#4
GLM-4.7
GLM-4.7
27
#5
gpt-oss-120b (high)
gpt-oss-120b (high)
24

Intelligence Index

Insgesamt 7 Modelle

Am schnellsten

#1
GLM-4.7
GLM-4.7
195 t/s
#2
GLM-4.7
GLM-4.7
186 t/s
#3
gpt-oss-120b (high)
gpt-oss-120b (high)
184 t/s
#4
DeepSeek V3.1 (FP8)
DeepSeek V3.1 (FP8)
169 t/s
#5
gpt-oss-120b (low)
gpt-oss-120b (low)
163 t/s

Ausgabegeschwindigkeit

Insgesamt 7 Modelle

Niedrigster Preis

#1
gpt-oss-120b (high)
gpt-oss-120b (high)
$0.14
#2
gpt-oss-120b (low)
gpt-oss-120b (low)
$0.14
#3
GLM-4.7
GLM-4.7
$0.42
#4
GLM-4.7
GLM-4.7
$0.42
#5
DeepSeek V3.1 (FP8)
DeepSeek V3.1 (FP8)
$0.42

Mischpreis (pro 1 Mio. Tokens)

Insgesamt 7 Modelle

Kennzeichnet ein Reasoning-Modell

Baseten bietet 7 Modelle mit jeweils unterschiedlichen Merkmalen bei Intelligenz, Leistung und Preis an. Nachfolgend werden die wichtigsten Metriken der Modelle verglichen.

  • Bei der Intelligenz sind GLM-5.2 (max) (51), DeepSeek V4 Pro (high) (43) und GLM-4.7 (34) die führenden Modelle von Baseten.
  • Bei der Ausgabegeschwindigkeit sind GLM-4.7 (195 t/s), GLM-4.7 (186 t/s) und gpt-oss-120b (high) (184 t/s) am schnellsten.
  • Bei der Latenz bieten GLM-4.7 (0.69 s), DeepSeek V3.1 (FP8) (0.75 s) und GLM-4.7 (10.95 s) die kürzeste Zeit bis zum ersten Antworttoken.
  • Beim Preis bieten gpt-oss-120b (high) ($0.14), gpt-oss-120b (low) ($0.14) und GLM-4.7 ($0.42) die niedrigsten Mischpreise pro 1 Mio. Tokens. Die Preise unterscheiden sich zwischen den Modellen bis zum 3.0-Fachen.
  • Bei der Größe des Kontextfensters unterstützen GLM-5.2 (max) (261k), GLM-4.7 (200k) und GLM-4.7 (200k) die größten Kontextfenster von Baseten.

Wichtigste Ergebnisse

Artificial Analysis Intelligence Index · Higher is better
Output tokens per second · Higher is better
USD per 1M tokens (blended) · Lower is better

Intelligenzevaluationen

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v4.1 incorporates 9 evaluations: GDPval-AA v2, 𝜏³-Banking, Terminal-Bench v2.1, SciCode, Humanity's Last Exam, GPQA Diamond, CritPt, AA-Omniscience, AA-LCR
Estimate (independent evaluation forthcoming)
Reasoning models are indicated by a lightbulb icon

Artificial Analysis Intelligence Index v4.1 includes: GDPval-AA v2, 𝜏³-Banking, Terminal-Bench v2.1, SciCode, Humanity's Last Exam, GPQA Diamond, CritPt, AA-Omniscience, AA-LCR. See Intelligence Index methodology for further details, including a breakdown of each evaluation and how we run them.

Intelligence Evaluations

Intelligence evaluations measured independently by Artificial Analysis · Higher is better

Agentic real-world work tasks, (Elo-500)/2000

Agentic tool use

Agentic coding & terminal use

Coding

Reasoning & knowledge

Scientific reasoning

Physics reasoning

Long context reasoning

Agentic knowledge work, Elo

Agentic SaaS workflows

Legal agentic work, criterion pass rate

Agentic business operations

Instruction following

Long-horizon agentic tasks

Kubernetes incident root-cause analysis

Visual reasoning

No data available
Reasoning models are indicated by a lightbulb icon

While model intelligence generally translates across use cases, specific evaluations may be more relevant for certain use cases.

Artificial Analysis Intelligence Index v4.1 includes: GDPval-AA v2, 𝜏³-Banking, Terminal-Bench v2.1, SciCode, Humanity's Last Exam, GPQA Diamond, CritPt, AA-Omniscience, AA-LCR. See Intelligence Index methodology for further details, including a breakdown of each evaluation and how we run them.

Intelligence Index vs. Price

Blended at 7:2:1 (cache-input-output) · USD per 1M tokens (blended)
Most attractive quadrant
Pareto line
Reasoning models are indicated by a lightbulb icon

While higher intelligence models are typically more expensive, they do not all follow the same price-quality curve.

Kontextfenster

Context Window

Context window: tokens limit · Higher is better
Reasoning models are indicated by a lightbulb icon

Larger context windows are relevant to RAG (Retrieval Augmented Generation) LLM workflows which typically involve reasoning and information retrieval of large amounts of data.

Maximum number of combined input & output tokens. Output tokens commonly have a significantly lower limit (varied by model).

Preise

Intelligence Index vs. Price

Blended at 7:2:1 (cache-input-output) · USD per 1M tokens (blended)
Most attractive quadrant
Pareto line
Reasoning models are indicated by a lightbulb icon

While higher intelligence models are typically more expensive, they do not all follow the same price-quality curve.

Leistungsübersicht

Output Speed vs. Price

Output speed: output tokens per second · USD per 1M tokens (blended)
Most attractive quadrant
Pareto line
Reasoning models are indicated by a lightbulb icon

Tokens per second received while the model is generating tokens (ie. after first chunk has been received from the API for models which support streaming).

Price per token, shown in USD per million tokens. Price is a blend of cache hit, input, and output token prices using the selected ratio (default 7:2:1 cache-input-output).

Geschwindigkeit

Gemessen anhand der Ausgabegeschwindigkeit (Tokens pro Sekunde)

Output Speed

Output tokens per second · Higher is better
Reasoning models are indicated by a lightbulb icon

Tokens per second received while the model is generating tokens (ie. after first chunk has been received from the API for models which support streaming).

Figures represent performance of the model's first-party API (e.g. OpenAI for o1) or the median across providers where a first-party API is not available (e.g. Meta's Llama models).

Latenz

Gemessen anhand der Zeit (Sekunden) bis zum ersten Token

Latency: Time To First Answer Token

Seconds to first answer token received · Accounts for reasoning model 'thinking' time
Reasoning models are indicated by a lightbulb icon

Time to first answer token received, in seconds, after API request sent. For reasoning models, this includes the 'thinking' time of the model before providing an answer. For models which do not support streaming, this represents time to receive the completion.

Ende-zu-Ende-Antwortzeit

Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed

End-to-End Response Time vs. Price

End-to-end response time: end-to-end seconds to output 500 tokens · USD per 1M tokens (blended)
Most attractive quadrant
Pareto line
Reasoning models are indicated by a lightbulb icon

Price per token, shown in USD per million tokens. Price is a blend of cache hit, input, and output token prices using the selected ratio (default 7:2:1 cache-input-output).

Weitere Analyse
Logo von Z AI
GLM-5.2 (max)
261k
Offen
51
$0.45
113
1.96
24.03
17.65
Logo von DeepSeek
DeepSeek V4 Pro (high)
131k
Offen
43
$0.68
146
0.55
17.56
13.60
Logo von Z AI
GLM-4.7
200k
Offen
34
$0.17
195
0.70
13.52
10.25
Logo von Z AI
GLM-4.7
200k
Offen
27*
--
186
0.69
3.38
--
Logo von OpenAI
gpt-oss-120b (high)
128k
Offen
24
$0.05
184
0.26
13.87
10.89
Logo von DeepSeek
DeepSeek V3.1 (FP8)
164k
Offen
21*
--
169
0.75
3.71
--
Logo von OpenAI
gpt-oss-120b (low)
128k
Offen
15
$0.01
163
0.26
15.60
12.27

Wichtige Definitionen

Maximum number of combined input & output tokens. Output tokens commonly have a significantly lower limit (varied by model).

Häufig gestellte Fragen

Häufige Fragen zu Baseten

Das intelligenteste bei Baseten verfügbare Modell ist GLM-5.2 (max) mit einem Intelligence-Index-Wert von 51.

Gemessen an der Ausgabegeschwindigkeit ist GLM-4.7 mit 195.1 Tokens pro Sekunde das schnellste Modell von Baseten.

Das Modell von Baseten mit der kürzesten Zeit bis zum ersten Antworttoken ist GLM-4.7 mit 0.69 s. Eine niedrigere Latenz bedeutet eine schnellere erste Antwort.

Gemessen am Mischpreis ist gpt-oss-120b (high) mit $0.14 pro 1 Mio. Tokens (Verhältnis von Cache-Treffern, Eingabe und Ausgabe: 7:2:1) das günstigste Modell von Baseten.

Die Preise der Modelle von Baseten unterscheiden sich bis zum 6-Fachen: von $0.14 pro 1 Mio. Tokens für gpt-oss-120b (high) bis $0.82 pro 1 Mio. Tokens für GLM-5.2 (max).

Ja, Baseten bietet eine OpenAI-kompatible API. Das erleichtert den Wechsel von OpenAI und die Verwendung bestehender Integrationen mit dem OpenAI SDK.

Ja, alle 7 Modelle von Baseten unterstützen den JSON-Modus für strukturierte Ausgaben.

Ja, alle 7 Modelle von Baseten unterstützen Funktionsaufrufe (Tool-Nutzung).

Ja, Baseten bietet 5 Reasoning-Modelle an: GLM-5.2 (max), DeepSeek V4 Pro (high), GLM-4.7, gpt-oss-120b (high) und gpt-oss-120b (low). Reasoning-Modelle nutzen ausführliches Schlussfolgern, um komplexe Probleme vor der Antwort zu bearbeiten.

Ja, alle 7 Modelle von Baseten haben offene Gewichte.

Ja, die Leistung eines Anbieters kann sich aufgrund von Infrastrukturänderungen, Lastverteilung und Aktualisierungen im Laufe der Zeit verändern. Wir benchmarken alle Anbieter fortlaufend und zeigen historische Leistungstrends in den Diagrammen „Im Zeitverlauf“ an.

Berücksichtigen Sie bei der Auswahl eines Modells von Baseten die Intelligenz für qualitätssensible Aufgaben, die Ausgabegeschwindigkeit für durchsatzintensive Aufgaben, die Latenz für interaktive Anwendungen mit schnellen ersten Antworten, die Preise für kostensensible Workloads sowie Funktionen wie die Größe des Kontextfensters, den JSON-Modus und die Unterstützung von Funktionsaufrufen.