Vergleich kleiner KI-Modelle mit offenen Gewichten (4B-40B)

Name: Offenheit
Creator: Artificial Analysis
License: https://artificialanalysis.ai/docs/legal/Terms-of-Use.pdf

KI-Modelle mit offenen Gewichten und 4B bis 40B Parametern.

Modelle gelten als Modelle mit offenen Gewichten (häufig auch als Open Source bezeichnet), wenn ihre Gewichte zum Download verfügbar sind. Dadurch können sie auf der eigenen Infrastruktur gehostet und beispielsweise durch Fine-Tuning angepasst werden.

Weitere Details, auch zu unserer Methodik, finden Sie in unseren FAQs.

Nanbeige4.3-33B und

Qwen3.8 27B (xhigh) erreichen unter den kleinen Modellen mit offenen Gewichten, definiert als Modelle mit 4B-40B Parametern, die höchsten Werte im Artificial Analysis Progress Index v1, gefolgt von

Qwen3.8 27B (medium) und

Qwen3.8 27B (low).

Offenheit

Artificial Analysis Openness Index · Higher is better

Progress Index

Artificial Analysis Progress Index v1 · Higher is better

Parameter insgesamt

Trainierbare Parameter in Milliarden

Offenheit

Artificial Analysis Openness Index: Wert

Der Openness Index bewertet die Offenheit von Modellen auf einer normierten Skala von 0 bis 100 (höher bedeutet offener)

Intelligenz

Artificial Analysis Progress Index

Artificial Analysis Progress Index v1 is an item response theory estimate of general capability across Artificial Analysis evaluations

Wir berechnen den Artificial Analysis Progress Index v1 mit der Item-Response-Theorie, die anhand unserer Benchmark-Ergebnisse die Fähigkeiten der Modelle und die Schwierigkeit der Aufgaben gemeinsam schätzt. So können wir Modelle im Zeitverlauf vergleichen, auch wenn sie auf unterschiedlichen Benchmarks getestet wurden.

Wir schätzen die Schwierigkeit einer Aufgabe anhand der Modelle, die sie lösen oder daran scheitern. Gleichzeitig schätzen wir die Fähigkeiten jedes Modells anhand seiner Ergebnisse über verschiedene Aufgaben hinweg.

Ein älteres Modell könnte beispielsweise auf leichteren Benchmarks getestet worden sein und ein neueres auf schwierigeren. Modelle, die auf beiden Gruppen von Benchmarks getestet wurden, helfen uns, den Schwierigkeitsunterschied zu schätzen und die älteren und neueren Modelle auf derselben Skala zu vergleichen.

Jede Effort-Variante wird als eigenes Modell dargestellt. Methodik des Progress Index v1 lesen.

Evaluations

Evaluations measured independently by Artificial Analysis · AA-PersonalityBench scores are percentile ranks from 1 to 100

AA-Briefcase v1.1

Agentic knowledge work, Elo

AA-Omniscience v1.1 Accuracy

Knowledge

AA-Omniscience v1.1 Non-Hallucination Rate

1 - hallucination rate

AutomationBench-AA

Agentic SaaS workflows

Terminal-Bench-Science 0.1

Agentic scientific research workflows in a terminal

FrontierCode-AA 2.0

Agentic software engineering in open-source repositories

HLE-Diamond

Reasoning & knowledge

GDP.pdf

Professional document reasoning, All-pass

Terminal-Bench 4.0

Agentic coding & terminal use

CritPt v2 (Hard Subset)

Physics reasoning

AA-AnalystAgent

Quantitative analysis on spreadsheets & documents

Harvey LAB-AA v1.1

Legal agentic work, Hallucination-Gated All-Pass Rate

No data available

EnterpriseOps-Gym-AA

Agentic business operations

GDPval-AA v2.1

Agentic real-world work tasks, Elo

AA-3D

Agentic interactive 3D experiences, Elo

No data available

Code2Video-AA

Product and brand videos designed in code, Elo

ITBench-AA

Kubernetes incident root-cause analysis

MLCR-AA

Medical long context reasoning

MMMU-Pro

Visual reasoning

AA-PersonalityBench: Expressiveness Score

Rich, varied, well-crafted language

AA-PersonalityBench: Organization Score

Well-structured, scannable, answer-first

AA-PersonalityBench: Transparency Score

Truthful, acknowledges uncertainty, non-sycophantic

AA-PersonalityBench: Slop Score

Use of filler and generic language

While model intelligence generally translates across use cases, specific evaluations may be more relevant for certain use cases.

Artificial Analysis Intelligence Index v5.0.1 includes: AA-Briefcase v1.1, AutomationBench-AA, Terminal-Bench 4.0, FrontierCode-AA 2.0, AA-Omniscience v1.1, GDP.pdf, HLE-Diamond, CritPt v2 (Hard Subset), Terminal-Bench-Science 0.1. See Intelligence Index methodology for further details, including a breakdown of each evaluation and how we run them.

Größe

Modellgröße: Gesamtparameter und aktive Parameter

Comparison between total model parameters and parameters active during inference (billions)

The total number of trainable weights and biases in the model, expressed in billions. These parameters are learned during training and determine the model's ability to process and generate responses.

The number of parameters actually executed during each inference forward pass, expressed in billions. For Mixture of Experts (MoE) models, a routing mechanism selects a subset of experts per token, resulting in fewer active than total parameters. Dense models use all parameters, so active equals total.

Progress Index vs. aktive Parameter

Artificial Analysis Progress Index v1 · Active parameters at inference time (billions)

Most attractive quadrant

Pareto line

Jede Effort-Variante wird als eigenes Modell dargestellt. Methodik des Progress Index v1 lesen.

Progress Index vs. Gesamtparameter

Artificial Analysis Progress Index v1 · Size in parameters (billions)

Most attractive quadrant

Pareto line

Jede Effort-Variante wird als eigenes Modell dargestellt. Methodik des Progress Index v1 lesen.

The total number of trainable weights and biases in the model, expressed in billions. These parameters are learned during training and determine the model's ability to process and generate responses.

Kontextfenster

Context window: tokens limit · Higher is better

Larger context windows are relevant to RAG (Retrieval Augmented Generation) LLM workflows which typically involve reasoning and information retrieval of large amounts of data.

Maximum number of combined input & output tokens. Output tokens commonly have a significantly lower limit (varied by model).

Weitere Details

								Gewichte		Anbieter-Benchmarks
Nanbeige4.3-33B	Nanbeige	306	33B	524k	-	-	-	🤗	-	Anzeigen
Qwen3.8 27B (Xhigh)	Alibaba	303	27B	256k	$0.47	42.8	43	🤗	+7	Anzeigen
Qwen3.8 27B (Medium)	Alibaba	290	27B	256k	$0.47	32.1	45	🤗		Anzeigen
Qwen3.8 27B (Low)	Alibaba	283	27B	256k	$0.47	30.3	44	🤗		Anzeigen
K2 Horizon MoVA 36B A4B	Institute of Foundation Models	281	36B 4B während der Inferenz aktiv	524k	-	-	-	🤗	-	Anzeigen
Muse Glimmer (High)	Meta	267	30B	131k	$0.23	5.2	84	🤗		Anzeigen
K2 Horizon 7B	Institute of Foundation Models	263	7B	524k	-	-	-	🤗	-	Anzeigen
Qwen3.8 27B (Non-reasoning)	Alibaba	262	27B	256k	$0.47	18.3	41	🤗	+4	Anzeigen
Qwen3.6 35B A3B (Reasoning)	Alibaba	261	36B 3B während der Inferenz aktiv	262k	$0.56	-	121	🤗	+5	Anzeigen
G9v3-39A5B	AI9Stars	257	39B 5B während der Inferenz aktiv	131k	-	-	-	🤗	-	Anzeigen
Gemma 4 31B (Reasoning)	Google	254	30.7B	256k	$0.00	-	32	🤗	+7	Anzeigen
Qwen3.6 35B A3B (Non-reasoning)	Alibaba	246	36B 3B während der Inferenz aktiv	262k	$0.56	-	100	🤗	+4	Anzeigen

Vergleich kleiner KI-Modelle mit offenen Gewichten (4B-40B)

Offenheit

Progress Index

Parameter insgesamt

Offenheit

Artificial Analysis Openness Index: Wert

Intelligenz

Artificial Analysis Progress Index

So wird der Progress Index v1 berechnet

Evaluations

Intelligence Evaluation Relevance

Artificial Analysis Intelligence Index

Größe

Modellgröße: Gesamtparameter und aktive Parameter

Total Parameters

Active Parameters at Inference Time

Progress Index vs. aktive Parameter

So wird der Progress Index v1 berechnet

Active Parameters at Inference Time

Progress Index vs. Gesamtparameter

So wird der Progress Index v1 berechnet

Total Parameters

Kontextfenster

Kontextfenster

Context Window for RAG

Context Window

Weitere Details