Together AI: Intelligenz, Leistung und Preise der Modelle

Together AI
Together AI

Diese Analyse soll Sie bei der Auswahl des besten von Together AI angebotenen Modells für Ihren Anwendungsfall unterstützen.

Höchste Intelligenz

#1
Kimi K3 (max)
Kimi K3 (max)
60
#2
Qwen3.8 2.4T A95B
Qwen3.8 2.4T A95B
58
#3
GLM-5.2 (max)
GLM-5.2 (max)
53
#4
MiniMax-M3
MiniMax-M3
45
#5
Kimi K2.7 Code
Kimi K2.7 Code
43

Intelligence Index

Insgesamt 16 Modelle

Am schnellsten

#1
Qwen3.8 2.4T A95B
Qwen3.8 2.4T A95B
186 t/s
#2
Nemotron 3 Ultra
Nemotron 3 Ultra
178 t/s
#3
Kimi K2.7 Code
Kimi K2.7 Code
170 t/s
#4
GLM-5.2 (max)
GLM-5.2 (max)
166 t/s
#5
gpt-oss-120b (high)
gpt-oss-120b (high)
147 t/s

Ausgabegeschwindigkeit

Insgesamt 16 Modelle

Niedrigster Preis

#1
Gemma 3n E4B
Gemma 3n E4B
$0.07
#2
Qwen3.5 9B (FP8)
Qwen3.5 9B (FP8)
$0.18
#3
Qwen3.5 9B (FP8)
Qwen3.5 9B (FP8)
$0.18
#4
gpt-oss-120b (high)
gpt-oss-120b (high)
$0.20
#5
gpt-oss-120b (low)
gpt-oss-120b (low)
$0.20

Mischpreis (pro 1 Mio. Tokens)

Insgesamt 16 Modelle

Kennzeichnet ein Reasoning-Modell

Together AI bietet 16 Modelle mit jeweils unterschiedlichen Merkmalen bei Intelligenz, Leistung und Preis an. Nachfolgend werden die wichtigsten Metriken der Modelle verglichen.

  • Bei der Intelligenz sind Kimi K3 (max) (60), Qwen3.8 2.4T A95B (58) und GLM-5.2 (max) (53) die führenden Modelle von Together AI.
  • Bei der Ausgabegeschwindigkeit sind Qwen3.8 2.4T A95B (186 t/s), Nemotron 3 Ultra (178 t/s) und Kimi K2.7 Code (170 t/s) am schnellsten.
  • Bei der Latenz bieten Qwen3.5 9B (FP8) (0.82 s), Gemma 4 31B (FP8) (1.19 s) und Gemma 3n E4B (1.26 s) die kürzeste Zeit bis zum ersten Antworttoken.
  • Beim Preis bieten Gemma 3n E4B ($0.07), Qwen3.5 9B (FP8) ($0.18) und Qwen3.5 9B (FP8) ($0.18) die niedrigsten Mischpreise pro 1 Mio. Tokens. Die Preise unterscheiden sich zwischen den Modellen bis zum 3.0-Fachen.
  • Bei der Größe des Kontextfensters unterstützen Kimi K3 (max) (1M), MiniMax-M3 (1M) und Inkling (524k) die größten Kontextfenster von Together AI.

Wichtigste Ergebnisse

Artificial Analysis Intelligence Index · Higher is better
Output tokens per second · Higher is better
USD per 1M tokens (blended) · Lower is better

Intelligenzevaluationen

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v4.1.1 incorporates 9 evaluations: GDPval-AA v2, 𝜏³-Banking, Terminal-Bench v2.1, SciCode, Humanity's Last Exam, GPQA Diamond, CritPt, AA-Omniscience, AA-LCR
Reasoning models are indicated by a lightbulb icon

Artificial Analysis Intelligence Index v4.1.1 includes: GDPval-AA v2, 𝜏³-Banking, Terminal-Bench v2.1, SciCode, Humanity's Last Exam, GPQA Diamond, CritPt, AA-Omniscience, AA-LCR. See Intelligence Index methodology for further details, including a breakdown of each evaluation and how we run them.

Intelligence Evaluations

Intelligence evaluations measured independently by Artificial Analysis · Higher is better
See more

Agentic real-world work tasks, (Elo-500)/2000

Agentic tool use

Agentic coding & terminal use

Coding

Reasoning & knowledge

Scientific reasoning

Physics reasoning

Knowledge

1 - hallucination rate

AA-LCRUpdated

Long context reasoning

Agentic knowledge work, Elo

Agentic SaaS workflows

Legal agentic work, criterion pass rate

Agentic business operations

Quantitative analysis on spreadsheets & documents

Instruction following

Long-horizon agentic tasks

Kubernetes incident root-cause analysis

Visual reasoning

Reasoning models are indicated by a lightbulb icon

While model intelligence generally translates across use cases, specific evaluations may be more relevant for certain use cases.

Artificial Analysis Intelligence Index v4.1.1 includes: GDPval-AA v2, 𝜏³-Banking, Terminal-Bench v2.1, SciCode, Humanity's Last Exam, GPQA Diamond, CritPt, AA-Omniscience, AA-LCR. See Intelligence Index methodology for further details, including a breakdown of each evaluation and how we run them.

Intelligence Index vs. Price

Blended at 7:2:1 (cache-input-output) · USD per 1M tokens (blended)
Most attractive quadrant
Pareto line
Reasoning models are indicated by a lightbulb icon

While higher intelligence models are typically more expensive, they do not all follow the same price-quality curve.

Kontextfenster

Context Window

Context window: tokens limit · Higher is better
Reasoning models are indicated by a lightbulb icon

Larger context windows are relevant to RAG (Retrieval Augmented Generation) LLM workflows which typically involve reasoning and information retrieval of large amounts of data.

Maximum number of combined input & output tokens. Output tokens commonly have a significantly lower limit (varied by model).

Preise

Intelligence Index vs. Price

Blended at 7:2:1 (cache-input-output) · USD per 1M tokens (blended)
Most attractive quadrant
Pareto line
Reasoning models are indicated by a lightbulb icon

While higher intelligence models are typically more expensive, they do not all follow the same price-quality curve.

Leistungsübersicht

Output Speed vs. Price

Output speed: output tokens per second · USD per 1M tokens (blended)
Most attractive quadrant
Pareto line
Reasoning models are indicated by a lightbulb icon

Tokens per second received while the model is generating tokens (ie. after first chunk has been received from the API for models which support streaming).

Price per token, shown in USD per million tokens. Price is a blend of cache hit, input, and output token prices using the selected ratio (default 7:2:1 cache-input-output).

Geschwindigkeit

Gemessen anhand der Ausgabegeschwindigkeit (Tokens pro Sekunde)

Output Speed

Output tokens per second · Higher is better
Reasoning models are indicated by a lightbulb icon

Tokens per second received while the model is generating tokens (ie. after first chunk has been received from the API for models which support streaming).

Figures represent performance of the model's first-party API (e.g. OpenAI for o1) or the median across providers where a first-party API is not available (e.g. Meta's Llama models).

Latenz

Gemessen anhand der Zeit (Sekunden) bis zum ersten Token

Latency: Time To First Answer Token

Seconds to first answer token received · Accounts for reasoning model 'thinking' time
Reasoning models are indicated by a lightbulb icon

Time to first answer token received, in seconds, after API request sent. For reasoning models, this includes the 'thinking' time of the model before providing an answer. For models which do not support streaming, this represents time to receive the completion.

Ende-zu-Ende-Antwortzeit

Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed

End-to-End Response Time vs. Price

End-to-end response time: end-to-end seconds to output 500 tokens · USD per 1M tokens (blended)
Most attractive quadrant
Pareto line
Reasoning models are indicated by a lightbulb icon

Price per token, shown in USD per million tokens. Price is a blend of cache hit, input, and output token prices using the selected ratio (default 7:2:1 cache-input-output).

Weitere Analyse
Logo von Kimi
Kimi K3 (max)
1.05M
Offen
60
$1.43
44
1.07
58.07
45.60
Logo von Alibaba
Qwen3.8 2.4T A95B
262k
Offen
58
$1.74
185
1.08
14.61
10.83
Logo von Z AI
GLM-5.2 (max)
262k
Offen
53
$0.67
166
0.78
15.80
12.02
Logo von MiniMax
MiniMax-M3
1M
Offen
45
$0.21
133
0.67
19.52
15.08
Logo von Kimi
Kimi K2.7 Code
262k
Offen
43
$0.30
167
0.46
16.81
13.36
Logo von Thinking Machines
Inkling
524k
Offen
42
$0.62
147
0.84
17.82
13.58
Logo von NVIDIA
Nemotron 3 Ultra
512k
Offen
38
$0.40
178
0.68
16.31
12.81
Logo von Meta
Muse Glimmer (high)
131k
Offen
35
$0.08
61
0.87
41.57
32.56
Logo von MiniMax
MiniMax-M2.5 (FP4)
197k
Offen
34*
--
--
--
--
--
Logo von Z AI
GLM-4.7
203k
Offen
34
$0.28
--
--
--
--
Logo von Google
Gemma 4 31B (FP8)
262k
Offen
30
$0.10
63
1.15
36.48
27.43
Logo von Z AI
GLM-4.6
203k
Offen
29
$0.33
--
--
--
--
Logo von Z AI
GLM-4.7
203k
Offen
27*
--
--
--
--
--
Logo von OpenAI
gpt-oss-120b (high)
131k
Offen
24
$0.07
147
0.57
17.61
13.63
Logo von Z AI
GLM-4.6
203k
Offen
23*
--
--
--
--
--
Logo von Google
Gemma 4 31B (FP8)
262k
Offen
22
$0.11
65
1.17
8.84
--
Logo von Alibaba
Qwen3.5 9B (FP8)
262k
Offen
22
$0.30
82
0.77
31.34
24.46
Logo von ServiceNow
Apriel-v1.5-15B-Thinker
131k
Offen
22*
--
--
--
--
--
Logo von DeepSeek
DeepSeek V3.1
131k
Offen
21*
--
--
--
--
--
Logo von Alibaba
Qwen3 Coder Next (FP8)
262k
Offen
21
$0.47
--
--
--
--
Logo von ServiceNow
Apriel-v1.6-15B-Thinker
131k
Offen
21*
--
--
--
--
--
Logo von Alibaba
Qwen3.5 9B (FP8)
262k
Offen
21*
--
86
0.78
6.58
--
Logo von DeepSeek
DeepSeek R1 0528
164k
Offen
20*
--
--
--
--
--
Logo von DeepSeek
DeepSeek R1 (Jan)
164k
Offen
19
$0.50
--
--
--
--
Logo von Z AI
GLM-4.5-Air (FP8)
131k
Offen
17*
--
--
--
--
--
Logo von OpenAI
gpt-oss-120b (low)
131k
Offen
15
$0.02
134
0.63
19.31
14.94
Logo von Meta
Llama 4 Maverick
1.05M
Offen
14
$0.04
--
--
--
--
Logo von Meta
Llama 3.3 70B Turbo
131k
Offen
9*
--
72
1.46
8.37
--
Logo von Google
Gemma 3n E4B
32.8k
Offen
1*
--
57
1.24
10.01
--
Logo von Deep Cogito
Cogito v2.1
164k
Offen
--
--
--
--
--
--

Wichtige Definitionen

Maximum number of combined input & output tokens. Output tokens commonly have a significantly lower limit (varied by model).

Häufig gestellte Fragen

Häufige Fragen zu Together AI

Das intelligenteste bei Together AI verfügbare Modell ist Kimi K3 (max) mit einem Intelligence-Index-Wert von 60.

Gemessen an der Ausgabegeschwindigkeit ist Qwen3.8 2.4T A95B mit 185.7 Tokens pro Sekunde das schnellste Modell von Together AI.

Das Modell von Together AI mit der kürzesten Zeit bis zum ersten Antworttoken ist Qwen3.5 9B (FP8) mit 0.82 s. Eine niedrigere Latenz bedeutet eine schnellere erste Antwort.

Gemessen am Mischpreis ist Gemma 3n E4B mit $0.07 pro 1 Mio. Tokens (Verhältnis von Cache-Treffern, Eingabe und Ausgabe: 7:2:1) das günstigste Modell von Together AI.

Die Preise der Modelle von Together AI unterscheiden sich bis zum 35-Fachen: von $0.07 pro 1 Mio. Tokens für Gemma 3n E4B bis $2.31 pro 1 Mio. Tokens für Kimi K3 (max).

Ja, Together AI bietet eine OpenAI-kompatible API. Das erleichtert den Wechsel von OpenAI und die Verwendung bestehender Integrationen mit dem OpenAI SDK.

Ja, alle 16 Modelle von Together AI unterstützen den JSON-Modus für strukturierte Ausgaben.

15 von 16 Modellen von Together AI unterstützen Funktionsaufrufe (Tool-Nutzung).

Ja, Together AI bietet 12 Reasoning-Modelle an: Kimi K3 (max), Qwen3.8 2.4T A95B, GLM-5.2 (max), MiniMax-M3, Kimi K2.7 Code, Inkling, Nemotron 3 Ultra, Muse Glimmer (high), Gemma 4 31B (FP8), gpt-oss-120b (high), Qwen3.5 9B (FP8) und gpt-oss-120b (low). Reasoning-Modelle nutzen ausführliches Schlussfolgern, um komplexe Probleme vor der Antwort zu bearbeiten.

Ja, alle 16 Modelle von Together AI haben offene Gewichte.

Ja, die Leistung eines Anbieters kann sich aufgrund von Infrastrukturänderungen, Lastverteilung und Aktualisierungen im Laufe der Zeit verändern. Wir benchmarken alle Anbieter fortlaufend und zeigen historische Leistungstrends in den Diagrammen „Im Zeitverlauf“ an.

Berücksichtigen Sie bei der Auswahl eines Modells von Together AI die Intelligenz für qualitätssensible Aufgaben, die Ausgabegeschwindigkeit für durchsatzintensive Aufgaben, die Latenz für interaktive Anwendungen mit schnellen ersten Antworten, die Preise für kostensensible Workloads sowie Funktionen wie die Größe des Kontextfensters, den JSON-Modus und die Unterstützung von Funktionsaufrufen.