Together AI: Intelligenz, Leistung und Preise der Modelle

Together AI
Together AI

Analyse der Modelle von Together AI anhand zentraler Metriken wie Qualität, Preis, Ausgabegeschwindigkeit, Latenz, Kontextfenster und mehr. Diese Analyse soll Sie bei der Auswahl des besten von Together AI angebotenen Modells für Ihren Anwendungsfall unterstützen.

Höchste Intelligenz

#1
Kimi K3 (max)
Kimi K3 (max)
57
#2
MiniMax-M3
MiniMax-M3
44
#3
Kimi K2.7 Code
Kimi K2.7 Code
42
#4
Inkling
Inkling
41
#5
Nemotron 3 Ultra
Nemotron 3 Ultra
38

Intelligence Index

Insgesamt 11 Modelle

Am schnellsten

#1
Kimi K2.6 (FP4)
Kimi K2.6 (FP4)
401 t/s
#2
Kimi K2.7 Code
Kimi K2.7 Code
227 t/s
#3
Nemotron 3 Ultra
Nemotron 3 Ultra
145 t/s
#4
Inkling
Inkling
99 t/s
#5
Llama 3.3 70B Turbo
Llama 3.3 70B Turbo
86 t/s

Ausgabegeschwindigkeit

Insgesamt 11 Modelle

Niedrigster Preis

#1
Gemma 3n E4B
Gemma 3n E4B
$0.07
#2
Qwen3.5 9B (FP8)
Qwen3.5 9B (FP8)
$0.18
#3
MiniMax-M3
MiniMax-M3
$0.22
#4
Gemma 4 31B (FP8)
Gemma 4 31B (FP8)
$0.45
#5
Gemma 4 31B (FP8)
Gemma 4 31B (FP8)
$0.45

Mischpreis (pro 1 Mio. Tokens)

Insgesamt 11 Modelle

Kennzeichnet ein Reasoning-Modell

Together AI bietet 11 Modelle mit jeweils unterschiedlichen Merkmalen bei Intelligenz, Leistung und Preis an. Nachfolgend werden die wichtigsten Metriken der Modelle verglichen.

  • Bei der Intelligenz sind Kimi K3 (max) (57), MiniMax-M3 (44) und Kimi K2.7 Code (42) die führenden Modelle von Together AI.
  • Bei der Ausgabegeschwindigkeit sind Kimi K2.6 (FP4) (401 t/s), Kimi K2.7 Code (227 t/s) und Nemotron 3 Ultra (145 t/s) am schnellsten. Die Geschwindigkeit unterscheidet sich deutlich zwischen den Modellen; der Unterschied zwischen dem schnellsten und dem langsamsten beträgt 365 %.
  • Bei der Latenz bieten Kimi K2.6 (FP4) (0.64 s), Gemma 4 31B (FP8) (1.28 s) und Gemma 3n E4B (1.29 s) die kürzeste Zeit bis zum ersten Antworttoken.
  • Beim Preis bieten Gemma 3n E4B ($0.07), Qwen3.5 9B (FP8) ($0.18) und MiniMax-M3 ($0.22) die niedrigsten Mischpreise pro 1 Mio. Tokens. Die Preise unterscheiden sich zwischen den Modellen bis zum 6.8-Fachen.
  • Bei der Größe des Kontextfensters unterstützen Kimi K3 (max) (1M), MiniMax-M3 (1M) und Inkling (524k) die größten Kontextfenster von Together AI.

Wichtigste Ergebnisse

Artificial Analysis Intelligence Index · Higher is better
Output tokens per second · Higher is better
USD per 1M tokens (blended) · Lower is better

Intelligenzevaluationen

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v4.1 incorporates 9 evaluations: GDPval-AA v2, 𝜏³-Banking, Terminal-Bench v2.1, SciCode, Humanity's Last Exam, GPQA Diamond, CritPt, AA-Omniscience, AA-LCR
Estimate (independent evaluation forthcoming)
Reasoning models are indicated by a lightbulb icon

Artificial Analysis Intelligence Index v4.1 includes: GDPval-AA v2, 𝜏³-Banking, Terminal-Bench v2.1, SciCode, Humanity's Last Exam, GPQA Diamond, CritPt, AA-Omniscience, AA-LCR. See Intelligence Index methodology for further details, including a breakdown of each evaluation and how we run them.

Intelligence Evaluations

Intelligence evaluations measured independently by Artificial Analysis · Higher is better

Agentic real-world work tasks, (Elo-500)/2000

Agentic tool use

Agentic coding & terminal use

Coding

Reasoning & knowledge

Scientific reasoning

Physics reasoning

Long context reasoning

Agentic knowledge work, Elo

Agentic SaaS workflows

Legal agentic work, criterion pass rate

Agentic business operations

Instruction following

Long-horizon agentic tasks

Kubernetes incident root-cause analysis

Visual reasoning

Reasoning models are indicated by a lightbulb icon

While model intelligence generally translates across use cases, specific evaluations may be more relevant for certain use cases.

Artificial Analysis Intelligence Index v4.1 includes: GDPval-AA v2, 𝜏³-Banking, Terminal-Bench v2.1, SciCode, Humanity's Last Exam, GPQA Diamond, CritPt, AA-Omniscience, AA-LCR. See Intelligence Index methodology for further details, including a breakdown of each evaluation and how we run them.

Intelligence Index vs. Price

Blended at 7:2:1 (cache-input-output) · USD per 1M tokens (blended)
Most attractive quadrant
Pareto line
Reasoning models are indicated by a lightbulb icon

While higher intelligence models are typically more expensive, they do not all follow the same price-quality curve.

Kontextfenster

Context Window

Context window: tokens limit · Higher is better
Reasoning models are indicated by a lightbulb icon

Larger context windows are relevant to RAG (Retrieval Augmented Generation) LLM workflows which typically involve reasoning and information retrieval of large amounts of data.

Maximum number of combined input & output tokens. Output tokens commonly have a significantly lower limit (varied by model).

Preise

Intelligence Index vs. Price

Blended at 7:2:1 (cache-input-output) · USD per 1M tokens (blended)
Most attractive quadrant
Pareto line
Reasoning models are indicated by a lightbulb icon

While higher intelligence models are typically more expensive, they do not all follow the same price-quality curve.

Leistungsübersicht

Output Speed vs. Price

Output speed: output tokens per second · USD per 1M tokens (blended)
Most attractive quadrant
Pareto line
Reasoning models are indicated by a lightbulb icon

Tokens per second received while the model is generating tokens (ie. after first chunk has been received from the API for models which support streaming).

Price per token, shown in USD per million tokens. Price is a blend of cache hit, input, and output token prices using the selected ratio (default 7:2:1 cache-input-output).

Geschwindigkeit

Gemessen anhand der Ausgabegeschwindigkeit (Tokens pro Sekunde)

Output Speed

Output tokens per second · Higher is better
Reasoning models are indicated by a lightbulb icon

Tokens per second received while the model is generating tokens (ie. after first chunk has been received from the API for models which support streaming).

Figures represent performance of the model's first-party API (e.g. OpenAI for o1) or the median across providers where a first-party API is not available (e.g. Meta's Llama models).

Latenz

Gemessen anhand der Zeit (Sekunden) bis zum ersten Token

Latency: Time To First Answer Token

Seconds to first answer token received · Accounts for reasoning model 'thinking' time
Reasoning models are indicated by a lightbulb icon

Time to first answer token received, in seconds, after API request sent. For reasoning models, this includes the 'thinking' time of the model before providing an answer. For models which do not support streaming, this represents time to receive the completion.

Ende-zu-Ende-Antwortzeit

Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed

End-to-End Response Time vs. Price

End-to-end response time: end-to-end seconds to output 500 tokens · USD per 1M tokens (blended)
Most attractive quadrant
Pareto line
Reasoning models are indicated by a lightbulb icon

Price per token, shown in USD per million tokens. Price is a blend of cache hit, input, and output token prices using the selected ratio (default 7:2:1 cache-input-output).

Weitere Analyse
Logo von Kimi
Kimi K3 (max)
1M
Offen
57
$1.46
55
0.94
46.46
36.42
Logo von MiniMax
MiniMax-M3
1M
Offen
44
$0.20
62
0.93
41.16
32.19
Logo von Kimi
Kimi K2.7 Code
262k
Offen
42
$0.30
227
0.51
12.55
9.83
Logo von Thinking Machines
Inkling
524k
Offen
41
$0.61
99
0.63
25.99
20.29
Logo von NVIDIA
Nemotron 3 Ultra
512k
Offen
38
$0.40
145
0.72
19.83
15.67
Logo von Kimi
Kimi K2.6 (FP4)
262k
Offen
35*
--
401
0.64
1.89
--
Logo von Z AI
GLM-4.7
203k
Offen
34
$0.27
--
--
--
--
Logo von MiniMax
MiniMax-M2.5 (FP4)
197k
Offen
34*
--
--
--
--
--
Logo von Google
Gemma 4 31B (FP8)
262k
Offen
29
$0.10
58
1.56
40.30
30.08
Logo von Z AI
GLM-4.6
203k
Offen
29
$0.33
--
--
--
--
Logo von Z AI
GLM-4.7
203k
Offen
27*
--
--
--
--
--
Logo von Z AI
GLM-4.6
203k
Offen
23*
--
--
--
--
--
Logo von Google
Gemma 4 31B (FP8)
262k
Offen
22
$0.10
62
1.28
9.32
--
Logo von Alibaba
Qwen3.5 9B (FP8)
262k
Offen
21
$0.31
86
0.74
29.84
23.28
Logo von ServiceNow
Apriel-v1.5-15B-Thinker
131k
Offen
21*
--
--
--
--
--
Logo von Alibaba
Qwen3 Coder Next (FP8)
262k
Offen
21
$0.47
--
--
--
--
Logo von DeepSeek
DeepSeek V3.1
131k
Offen
21*
--
--
--
--
--
Logo von ServiceNow
Apriel-v1.6-15B-Thinker
131k
Offen
21*
--
--
--
--
--
Logo von DeepSeek
DeepSeek R1 0528
164k
Offen
20*
--
--
--
--
--
Logo von DeepSeek
DeepSeek R1 (Jan)
164k
Offen
19
$0.50
--
--
--
--
Logo von Z AI
GLM-4.5-Air (FP8)
131k
Offen
17*
--
--
--
--
--
Logo von Meta
Llama 4 Maverick
1.05M
Offen
14
$0.04
--
--
--
--
Logo von Meta
Llama 3.3 70B Turbo
131k
Offen
9
$0.16
86
1.31
7.11
--
Logo von Google
Gemma 3n E4B
32.8k
Offen
1*
--
43
1.29
12.91
--
Logo von Deep Cogito
Cogito v2.1
164k
Offen
--
--
--
--
--
--

Wichtige Definitionen

Maximum number of combined input & output tokens. Output tokens commonly have a significantly lower limit (varied by model).

Häufig gestellte Fragen

Häufige Fragen zu Together AI

Das intelligenteste bei Together AI verfügbare Modell ist Kimi K3 (max) mit einem Intelligence-Index-Wert von 57.

Gemessen an der Ausgabegeschwindigkeit ist Kimi K2.6 (FP4) mit 400.8 Tokens pro Sekunde das schnellste Modell von Together AI.

Das Modell von Together AI mit der kürzesten Zeit bis zum ersten Antworttoken ist Kimi K2.6 (FP4) mit 0.64 s. Eine niedrigere Latenz bedeutet eine schnellere erste Antwort.

Gemessen am Mischpreis ist Gemma 3n E4B mit $0.07 pro 1 Mio. Tokens (Verhältnis von Cache-Treffern, Eingabe und Ausgabe: 7:2:1) das günstigste Modell von Together AI.

Die Preise der Modelle von Together AI unterscheiden sich bis zum 35-Fachen: von $0.07 pro 1 Mio. Tokens für Gemma 3n E4B bis $2.31 pro 1 Mio. Tokens für Kimi K3 (max).

Ja, Together AI bietet eine OpenAI-kompatible API. Das erleichtert den Wechsel von OpenAI und die Verwendung bestehender Integrationen mit dem OpenAI SDK.

Ja, alle 11 Modelle von Together AI unterstützen den JSON-Modus für strukturierte Ausgaben.

10 von 11 Modellen von Together AI unterstützen Funktionsaufrufe (Tool-Nutzung).

Ja, Together AI bietet 7 Reasoning-Modelle an: Kimi K3 (max), MiniMax-M3, Kimi K2.7 Code, Inkling, Nemotron 3 Ultra, Gemma 4 31B (FP8) und Qwen3.5 9B (FP8). Reasoning-Modelle nutzen ausführliches Schlussfolgern, um komplexe Probleme vor der Antwort zu bearbeiten.

Ja, alle 11 Modelle von Together AI haben offene Gewichte.

Ja, die Leistung eines Anbieters kann sich aufgrund von Infrastrukturänderungen, Lastverteilung und Aktualisierungen im Laufe der Zeit verändern. Wir benchmarken alle Anbieter fortlaufend und zeigen historische Leistungstrends in den Diagrammen „Im Zeitverlauf“ an.

Berücksichtigen Sie bei der Auswahl eines Modells von Together AI die Intelligenz für qualitätssensible Aufgaben, die Ausgabegeschwindigkeit für durchsatzintensive Aufgaben, die Latenz für interaktive Anwendungen mit schnellen ersten Antworten, die Preise für kostensensible Workloads sowie Funktionen wie die Größe des Kontextfensters, den JSON-Modus und die Unterstützung von Funktionsaufrufen.