This model is deprecated. We only continue performance benchmarking for the default 10k input token workload. Results for other workloads are historical and no longer updated.

Google has launched a newer model, Gemma 4 26B A4B. We suggest considering it instead.

For more information, see comparison of Gemma 4 26B A4B to other models and API provider benchmarks for Gemma 4 26B A4B.

Open weights model

Released März 2025

Gemma 3 12B Instruct Benchmarking und Analyse von API-Anbietern

Modellvergleich

Diese Analyse soll Sie bei der Auswahl des besten API-Anbieters von Gemma 3 12B Instruct für Ihren Anwendungsfall unterstützen.

Am schnellsten

#1
AmazonAmazon
99.3 t/s
#2
DeepInfraDeepInfra
40.8 t/s

Ausgabegeschwindigkeit

Insgesamt 3 Anbieter

Niedrigste Latenz

#1
DeepInfraDeepInfra
0.98 s
#2
AmazonAmazon
1.28 s

Zeit bis zum ersten Token

Insgesamt 3 Anbieter

Niedrigster Preis

#1
Google (AI Studio)Google (AI Studio)
$0.00
#2
DeepInfraDeepInfra
$0.06
#3
AmazonAmazon
$0.11

Mischpreis (pro 1 Mio. Tokens)

Insgesamt 3 Anbieter

Gemma 3 12B ist über 3 API-Anbieter verfügbar, die jeweils unterschiedliche Leistungsmerkmale und Preise bieten. Im Folgenden werden die wichtigsten Metriken der Anbieter verglichen.

  • Bei der Ausgabegeschwindigkeit führen Amazon (99.3 Tokens/s) und DeepInfra (40.8 Tokens/s).
  • Bei der Latenz bieten DeepInfra (0.98 s) und Amazon (1.28 s) die niedrigste Zeit bis zum ersten Token.
  • Bei den Preisen bieten Google (AI Studio) (0.00), DeepInfra (0.06) und Amazon (0.11) die niedrigsten Mischpreise pro 1 Mio. Tokens.

Wichtigste Ergebnisse

Output tokens per second · Higher is better
Seconds · Lower is better
USD per 1M tokens (blended) · Lower is better

Preise

Pricing: Cache Hit, Input, and Output

Price (USD per M Tokens) · Lower is better · 10,000 input tokens

Pricing: Blended Price

Blended at 7:2:1 (cache-input-output) · USD per 1M tokens (blended) · Lower is better

Output Speed vs. Price

Blended at 7:2:1 (cache-input-output) · Output speed: output tokens per second · USD per 1M tokens (blended)
Most attractive quadrant
Pareto line

Geschwindigkeit

Gemessen anhand der Ausgabegeschwindigkeit (Tokens pro Sekunde)

Output Speed: Gemma 3 12B Instruct

Output speed: output tokens per second · 10,000 input tokens

Latency vs. Output Speed

Latency: seconds to first token received · Output speed: output tokens per second · 10,000 input tokens
Most attractive quadrant
Pareto line

Latenz

Gemessen anhand der Zeit (in Sekunden) bis zum ersten Token

Zeit bis zum ersten Token

Seconds to first token received · Lower is better · 10,000 input tokens

Ende-zu-Ende-Antwortzeit

Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed

Ende-zu-Ende-Antwortzeit

Seconds to output 500 tokens, including reasoning model 'thinking' time · Lower is better · 10,000 input tokens

Wichtige Vergleichsmetriken und API-Funktionen

Logo von DeepInfraDeepInfra
131k
Offen
$0.13
41
0.98
13.24
--
Logo von Amazon BedrockAmazon Bedrock
128k
Offen
$0.24
99
1.28
6.31
--
Logo von GoogleGoogle
128k
Offen
$0.00
--
--
--
--

Häufig gestellte Fragen

Häufige Fragen zu den Anbietern von Gemma 3 12B Instruct