Gemma 4 26B A4B vs. Mistral Small 4: Vergleich der Veröffentlichungen

Name: Intelligenz
Creator: Artificial Analysis
License: https://artificialanalysis.ai/docs/legal/Terms-of-Use.pdf

Vergleich der Veröffentlichungen Gemma 4 26B A4B und Mistral Small 4: 2 bzw. 2 Modelle mit unterschiedlichen Eigenschaften bei Intelligenz, Leistung und Preis. Unten werden die wichtigsten Kennzahlen aller 4 Modelle verglichen.

Bei der Intelligenz liegt Gemma 4 26B A4B vorn: Gemma 4 26B A4B (Reasoning) mit 17, gegenüber Mistral Small 4 (Reasoning) mit 11 bei Mistral Small 4.
Bei der Ausgabegeschwindigkeit ist Mistral Small 4 am schnellsten: Mistral Small 4 (Reasoning) mit 162 Tokens/s, gegenüber Gemma 4 26B A4B (Non-reasoning) mit 100 Tokens/s bei Gemma 4 26B A4B.

Modell-Playground

Verglichene Veröffentlichungen


	Gemma 4 26B A4B	Gemma 4 26B A4B (non-reasoning)	Mistral Small 4	Mistral Small 4 (non-reasoning)
Intelligence Index	17*	13*	11	9*
Finanzen und Rechnungswesen	--	--	10	--
Strategie und Betrieb	--	--	7	--
Recht	--	--	13	--
Gesundheit und Medizin	--	--	--	--
Ingenieurwesen	--	--	16	--
Volkswirtschaft	19	--	18	--
AA-Briefcase v1.1	315	--	241	--
GDPval-AA v2.1	565	--	362	--
AutomationBench-AA	1.9%	--	1.0%	--
Terminal-Bench 4.0	--	--	0.0%	--
SciCode	40.0%	--	38.8%	--
Humanity's Last Exam	19.3%	11.5%	9.9%	3.8%
GDP.pdf	--	--	0.0%	--
CritPt	0.0%	0.0%	0.3%	0.3%
AA-Omniscience	−51	−62	−30	−49
AA-LCR v1.1	65.7%	42.3%	49.7%	28.3%

Kosten pro AufgabeUSD	--	--	$0.02	--
EingabepreisUSD/1 Mio. Tokens	$0.10	$0.13	$0.15	$0.15
AusgabepreisUSD/1 Mio. Tokens	$0.40	$0.40	$0.60	$0.60
Preis bei Cache-TrefferUSD/1 Mio. Tokens	$0.05	$0.10	$0.015	$0.015
Preis für Cache-SchreibvorgangUSD/1 Mio. Tokens	--	--	--	--

AusgabegeschwindigkeitTokens/s	73	100	162	153
Zeit bis zum ersten Tokens	0,98	0,97	0,80	0,87
Zeit bis zum ersten Antwort-Tokens	28,56	0,97	13,17	0,87
Ende-zu-Ende-Antwortzeits	35,45	5,96	16,27	4,14
Zeit pro Aufgabes	--	--	96,17	--

Kontextfenster	256k	256k	256k	256k
Modellentwickler	Google	Google	Mistral	Mistral
Lizenz	Offen	Offen	Offen	Offen
Eingabemodalität	Unterstützt: Text, Bilder und Video	Unterstützt: Text, Bilder und Video	Unterstützt: Text und Bilder	Unterstützt: Text und Bilder
Ausgabemodalität	Unterstützt: Text	Unterstützt: Text	Unterstützt: Text	Unterstützt: Text
Anbieter	+5	+6

* Geschätzt

Intelligenz

Artificial Analysis Intelligence Index · Higher is better

Geschwindigkeit

Output tokens per second · Higher is better

Kosten pro Aufgabe

Weighted average cost (USD) per Intelligence Index task · Lower is better

Intelligenz

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v4.3.2 incorporates 10 evaluations: AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1

Estimate (independent evaluation forthcoming)

Artificial Analysis Intelligence Index v4.3.2 includes: AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1. See Intelligence Index methodology for further details, including a breakdown of each evaluation and how we run them.

Intelligence Index vs. Kosten pro Aufgabe des Intelligence Index

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task

Most attractive quadrant

Pareto line

AA-Briefcase v1.1

GDPval-AA v2.1

Kosten pro Aufgabe (USD, logarithmische Skala)

Weighted average cost per Intelligence Index task. Each evaluation’s cost is calculated from input, cache hit, cache write, reasoning, and answer token prices, divided by task count, and weighted by its Intelligence Index weight.

Kosten

Kosten pro Aufgabe des Intelligence Index

Weighted average cost (USD) per Artificial Analysis Intelligence Index task, segmented by token type. Lower is better

Geschwindigkeit und Latenz

Ausgabegeschwindigkeit

Output tokens per second · Higher is better

Tokens per second received while the model is generating tokens (ie. after first chunk has been received from the API for models which support streaming).

Figures represent performance of the model's first-party API or the median across providers where a first-party API is not available.

Fähigkeitswerte

Fähigkeitsindizes

Misst die Leistung von Modellen bei bestimmten Fähigkeiten und in bestimmten Branchen

Finance & Accounting Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Strategy & Ops Index

Incorporates 6 evaluations: GDPval-AA v2.1, AA-Briefcase v1.1, AA-Omniscience, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Legal Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AA-LCR v1.1, GDP.pdf, AutomationBench-AA · Higher is better

Healthcare & Medical Index

Incorporates 6 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, MLCR-AA, Humanity's Last Exam, AutomationBench-AA · Higher is better

Engineering Index

Incorporates 6 evaluations: AA-Omniscience, Humanity's Last Exam, CritPt, GDPval-AA v2.1, AA-Briefcase v1.1, Terminal-Bench 4.0 · Higher is better

Economics Index

Incorporates 5 evaluations: AA-Omniscience, Humanity's Last Exam, GDPval-AA v2.1, AA-Briefcase v1.1, AA-LCR v1.1 · Higher is better

Gemma 4 26B A4B vs. Mistral Small 4: Vergleich der Veröffentlichungen

Intelligenz

Geschwindigkeit

Kosten pro Aufgabe

Intelligenz

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index

Intelligence Index vs. Kosten pro Aufgabe des Intelligence Index

Cost per Intelligence Index Task

Artificial Analysis Intelligence Index

Kosten

Kosten pro Aufgabe des Intelligence Index

Cost per Intelligence Index Task

Geschwindigkeit und Latenz

Ausgabegeschwindigkeit

Output Speed

Model Performance Representation

Fähigkeitswerte

Fähigkeitsindizes