Meta-Modelle: Intelligenz, Leistung und Preis

Artificial Analysis hat 25 Modelle von Meta gebenchmarkt. Unten werden die wichtigsten Kennzahlen dieser Modelle verglichen.

  • Bei der Intelligenz ist Muse Wonder Full (Max) mit 56 das führende Modell von Meta.
  • Bei der Ausgabegeschwindigkeit ist Muse Spark 1.3 (Xhigh) mit 288 Tokens/s das schnellste Modell.
  • Bei der Latenz bietet Llama 4 Scout mit 0,89 s die kürzeste Zeit bis zum ersten Antwort-Token.
  • Beim Preis bietet Llama 4 Maverick mit $0.04 die niedrigsten Kosten pro Aufgabe. Die Preise unterscheiden sich zwischen den Modellen um einen Faktor von bis zu 118.

Intelligenz

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v4.3.2 incorporates 10 evaluations: AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1
No publicly available API
Estimate (independent evaluation forthcoming)

Intelligence Index vs. Kosten pro Aufgabe

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task
Most attractive quadrant
Pareto line

Kosten

Kosten pro Aufgabe des Intelligence Index

Weighted average cost (USD) per Intelligence Index task · Segmented by token type · Lower is better

Geschwindigkeit und Latenz

Ausgabegeschwindigkeit

Output tokens per second · Higher is better

Fähigkeitswerte

Fähigkeitsindizes

Misst die Leistung von Modellen bei bestimmten Fähigkeiten und in bestimmten Branchen
Finance & Accounting Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Strategy & Ops Index

Incorporates 6 evaluations: GDPval-AA v2.1, AA-Briefcase v1.1, AA-Omniscience, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Legal Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AA-LCR v1.1, GDP.pdf, AutomationBench-AA · Higher is better

Healthcare & Medical Index

Incorporates 6 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, MLCR-AA, Humanity's Last Exam, AutomationBench-AA · Higher is better

Engineering Index

Incorporates 6 evaluations: AA-Omniscience, Humanity's Last Exam, CritPt, GDPval-AA v2.1, AA-Briefcase v1.1, Terminal-Bench 4.0 · Higher is better

Economics Index

Incorporates 5 evaluations: AA-Omniscience, Humanity's Last Exam, GDPval-AA v2.1, AA-Briefcase v1.1, AA-LCR v1.1 · Higher is better

Alle Veröffentlichungen von Meta

Weitere Details

Gewichte
Anbieter-Benchmarks
Muse Wonder Full (Max)
Logo von MetaMeta
56
-
1M
-
-
Nicht verfügbar
-
Muse Wonder (Max)
Logo von MetaMeta
52
-
1M
2,9 $
176
Nicht verfügbar
Meta
Muse Spark 1.3 (Max)
Logo von MetaMeta
48
-
1M
0,8 $
139
Nicht verfügbar
Meta
Muse Spark 1.3 (Xhigh)
Logo von MetaMeta
45
-
1M
0,8 $
288
Nicht verfügbar
Meta
Muse Spark 1.2 (Xhigh)
Logo von MetaMeta
40
-
1M
0,8 $
372
Nicht verfügbar
Meta
Muse Spark Open (Xhigh)
Logo von MetaMeta
39
816B
42B während der Inferenz aktiv
1M
0,8 $
140
BasetenNebiusFireworks
+2
Muse Spark 1.1 (Xhigh)
Logo von MetaMeta
34
-
1M
0,8 $
226
Nicht verfügbar
Meta
Muse Spark
Logo von MetaMeta
31
-
262k
-
-
Nicht verfügbar
-
Muse Glimmer (High)
Logo von MetaMeta
17
30B
131k
0,2 $
141
Together AIDeepInfraSystalyze
Llama 4 Maverick
Logo von MetaMeta
9
402B
17B während der Inferenz aktiv
1M
0,3 $
46
NovitaMicrosoft AzureAmazon Bedrock
+3
Llama 3.3 Instruct 70B
Logo von MetaMeta
8
70B
128k
0,7 $
93
GoogleGroqNovita
+8
Llama 3.1 Instruct 405B
Logo von MetaMeta
7
405B
128k
-
-
-
Llama 3.1 Instruct 8B
Logo von MetaMeta
7
8B
128k
0,0 $
141
GroqNovitaCoreWeave
+2
Llama 3.1 Instruct 70B
Logo von MetaMeta
7
70B
128k
0,6 $
33
Amazon BedrockDeepInfra
Llama 4 Scout
Logo von MetaMeta
6
109B
17B während der Inferenz aktiv
10M
0,2 $
119
DeepInfraMicrosoft AzureGoogle
+2
Llama 3.2 Instruct 90B (Vision)
Logo von MetaMeta
6
90B
128k
-
-
-
Llama 2 Chat 7B
Logo von MetaMeta
6
7B
4k
0,1 $
-
Replicate
Llama 3.2 Instruct 3B
Logo von MetaMeta
6
3B
128k
-
-
-
Llama 3 Instruct 70B
Logo von MetaMeta
5
70B
8k
0,9 $
-
NovitaAmazon BedrockReplicate
Llama 3.2 Instruct 11B (Vision)
Logo von MetaMeta
5
11B
128k
0,3 $
19
DeepInfra
Llama 2 Chat 70B
Logo von MetaMeta
5
70B
4k
-
-
-
Llama 2 Chat 13B
Logo von MetaMeta
5
13B
4k
-
-
-
Llama 65B
Logo von MetaMeta
5
65B
2k
-
-
-
Llama 3.2 Instruct 1B
Logo von MetaMeta
5
1B
128k
-
-
-
Llama 3 Instruct 8B
Logo von MetaMeta
5
8B
8k
0,1 $
-
NovitaReplicateDeepInfraAmazon Bedrock