StepFun-Modelle: Intelligenz, Leistung und Preis

Artificial Analysis Intelligence Index

* Geschätzt

Pro Aufgabe des Intelligence Index

Artificial Analysis hat 5 Modelle von StepFun gebenchmarkt. Unten werden die wichtigsten Kennzahlen dieser Modelle verglichen.

  • Bei der Intelligenz ist Step 5 Preview mit 44 das führende Modell von StepFun.
  • Bei der Ausgabegeschwindigkeit ist Step 5 Preview mit 91 Tokens/s das schnellste Modell.
  • Bei der Latenz bietet Step 5 Preview mit 24,13 s die kürzeste Zeit bis zum ersten Antwort-Token.
  • Beim Preis bietet Step 5 Preview mit $1.03 die niedrigsten Kosten pro Aufgabe.

Intelligenz

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v4.3.2 incorporates 10 evaluations: AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1
Estimate (independent evaluation forthcoming)

Intelligence Index vs. Kosten pro Aufgabe

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task
Most attractive quadrant

Kosten

Kosten pro Aufgabe des Intelligence Index

Weighted average cost (USD) per Intelligence Index task · Segmented by token type · Lower is better

Geschwindigkeit und Latenz

Ausgabegeschwindigkeit

Output tokens per second · Higher is better

Fähigkeitswerte

Fähigkeitsindizes

Misst die Leistung von Modellen bei bestimmten Fähigkeiten und in bestimmten Branchen
Finance & Accounting Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Strategy & Ops Index

Incorporates 6 evaluations: GDPval-AA v2.1, AA-Briefcase v1.1, AA-Omniscience, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Legal Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AA-LCR v1.1, GDP.pdf, AutomationBench-AA · Higher is better

Healthcare & Medical Index

Incorporates 6 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, MLCR-AA, Humanity's Last Exam, AutomationBench-AA · Higher is better

Engineering Index

Incorporates 6 evaluations: AA-Omniscience, Humanity's Last Exam, CritPt, GDPval-AA v2.1, AA-Briefcase v1.1, Terminal-Bench 4.0 · Higher is better

Economics Index

Incorporates 5 evaluations: AA-Omniscience, Humanity's Last Exam, GDPval-AA v2.1, AA-Briefcase v1.1, AA-LCR v1.1 · Higher is better

Alle Veröffentlichungen von StepFun

Weitere Details

Gewichte
Anbieter-Benchmarks
Step 5 Preview
Logo von StepFunStepFun
44
600B
27B während der Inferenz aktiv
1M
0,5 $
91
StepFun
Step 3.7 Flash
Logo von StepFunStepFun
19
198B
11B während der Inferenz aktiv
262k
0,2 $
212
StepFunDeepInfra
Step 3.5 Flash 2603
Logo von StepFunStepFun
17
-
256k
0,1 $
137
Nicht verfügbar
StepFun
Step 3.5 Flash
Logo von StepFunStepFun
17
196B
11B während der Inferenz aktiv
256k
0,1 $
130
StepFunSiliconFlow
Step3 VL 10B
Logo von StepFunStepFun
8
10.2B
66k
-
-
-