Modelos de StepFun: inteligência, desempenho e preço

A Artificial Analysis avaliou 5 modelos de StepFun. Abaixo, comparamos as principais métricas desses modelos.

  • Em inteligência, o principal modelo de StepFun é Step 5 Preview, com 44.
  • Em velocidade de saída, o modelo mais rápido é Step 3.7 Flash, com 197 tokens/s.
  • Em latência, Step 3.7 Flash, com 12,65 s oferece o menor tempo até o primeiro token de resposta.
  • Em termos de preço, Step 5 Preview, com $0.72 oferece o menor custo por tarefa.

Inteligência

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v4.3.2 incorporates 10 evaluations: AA-Briefcase v1.1, GDPval-AA v2.1, AutomationBench-AA, Terminal-Bench 4.0, SciCode, Humanity's Last Exam, GDP.pdf, CritPt, AA-Omniscience, AA-LCR v1.1
Estimate (independent evaluation forthcoming)

Intelligence Index vs. Cost per Intelligence Index Task

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task
Most attractive quadrant

Custo

Cost per Intelligence Index Task

Weighted average cost (USD) per Artificial Analysis Intelligence Index task, segmented by token type. Lower is better

Velocidade e latência

Output Speed

Output tokens per second · Higher is better

Pontuações de capacidades

Índices de capacidades

Mede o desempenho dos modelos em capacidades e setores específicos
Finance & Accounting Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Strategy & Ops Index

Incorporates 6 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better

Legal Index

Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AA-LCR v1.1, GDP.pdf, AutomationBench-AA · Higher is better

Healthcare & Medical Index

Incorporates 6 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, MLCR-AA, Humanity's Last Exam, AutomationBench-AA · Higher is better

Engineering Index

Incorporates 6 evaluations: AA-Omniscience, Humanity's Last Exam, CritPt, GDPval-AA v2.1, AA-Briefcase v1.1, Terminal-Bench 4.0 · Higher is better

Economics Index

Incorporates 5 evaluations: AA-Omniscience, Humanity's Last Exam, GDPval-AA v2.1, AA-Briefcase v1.1, AA-LCR v1.1 · Higher is better

Todos os lançamentos de StepFun

Mais detalhes

Pesos
Benchmarks de provedores
Step 5 Preview
Logo: StepFunStepFun
44
600B
27B ativos durante a inferência
1M
US$ 0,5
72
Não disponível
StepFun
Step 3.7 Flash
Logo: StepFunStepFun
19
198B
11B ativos durante a inferência
262k
US$ 0,2
197
StepFunDeepInfra
Step 3.5 Flash 2603
Logo: StepFunStepFun
17
-
256k
US$ 0,1
135
Não disponível
StepFun
Step 3.5 Flash
Logo: StepFunStepFun
17
196B
11B ativos durante a inferência
256k
US$ 0,1
143
StepFunSiliconFlow
Step3 VL 10B
Logo: StepFunStepFun
8
10.2B
66k
-
-
-