Modelos de OpenBMB: inteligência, desempenho e preço
Artificial Analysis Intelligence Index
* Estimado
Velocidade de saída
Por tarefa do Intelligence Index
A Artificial Analysis avaliou 4 modelos de OpenBMB. Abaixo, comparamos as principais métricas desses modelos.
- Em inteligência, o principal modelo de OpenBMB é MiniCPM5-2B, com 12.
Inteligência
Artificial Analysis Intelligence Index
Intelligence Index vs. Cost per Intelligence Index Task
Custo
Cost per Intelligence Index Task
Velocidade e latência
Output Speed
Pontuações de capacidades
Índices de capacidades
Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better
Incorporates 6 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better
Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AA-LCR v1.1, GDP.pdf, AutomationBench-AA · Higher is better
Incorporates 6 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, MLCR-AA, Humanity's Last Exam, AutomationBench-AA · Higher is better
Incorporates 6 evaluations: AA-Omniscience, Humanity's Last Exam, CritPt, GDPval-AA v2.1, AA-Briefcase v1.1, Terminal-Bench 4.0 · Higher is better
Incorporates 5 evaluations: AA-Omniscience, Humanity's Last Exam, GDPval-AA v2.1, AA-Briefcase v1.1, AA-LCR v1.1 · Higher is better
Todos os lançamentos de OpenBMB
Mais detalhes
Pesos | Benchmarks de provedores | ||||||||
|---|---|---|---|---|---|---|---|---|---|
| MiniCPM5-2B | 12 | 2.6B | 131k | - | - | - | |||
| MiniCPM5-1B (Reasoning) | 9 | 1B | 128k | - | - | - | |||
| MiniCPM5-1B (Non-reasoning) | 9 | 1B | 128k | - | - | - | |||
| MiniCPM-V 4.6 1.3B | 6 | 1.3B | 262k | - | - | - |