Modelos de Cohere: inteligência, desempenho e preço
Artificial Analysis Intelligence Index
Por tarefa do Intelligence Index
A Artificial Analysis avaliou 6 modelos de Cohere. Abaixo, comparamos as principais métricas desses modelos.
- Em inteligência, o principal modelo de Cohere é Command A+, com 6.
- Em velocidade, Command A+, com 3,2 min tem o menor tempo por tarefa.
- Em latência, Tiny Aya Global, com 0,30 s oferece o menor tempo até o primeiro token da resposta final.
- Em termos de preço, Command A+, com $0.00 e North Mini Code, com $0.00 oferecem o menor custo por tarefa.
Inteligência
Artificial Analysis Intelligence Index
Intelligence Index vs. custo por tarefa
Custo
Custo por tarefa do Intelligence Index
Velocidade e latência
Tempo por tarefa do Intelligence Index
Pontuações de capacidades
Índices de capacidades
Incorporates 5 evaluations: AA-Briefcase v1.1, AA-Omniscience v1.1, HLE-Diamond, AutomationBench-AA, GDP.pdf · Higher is better
Incorporates 4 evaluations: AutomationBench-AA, AA-Briefcase v1.1, AA-Omniscience v1.1, GDP.pdf · Higher is better
Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf, AutomationBench-AA · Higher is better
Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, MLCR-AA, AutomationBench-AA, HLE-Diamond · Higher is better
Incorporates 7 evaluations: AA-Omniscience v1.1, CritPt v2 (Hard Subset), Terminal-Bench-Science 0.1, HLE-Diamond, Terminal-Bench 4.0, FrontierCode 2.0, AA-Briefcase v1.1 · Higher is better
Incorporates 4 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf · Higher is better
Todos os lançamentos de Cohere
Mais detalhes
Pesos | Benchmarks de provedores | |||||||||
|---|---|---|---|---|---|---|---|---|---|---|
| Command A+ | 6 | 218B 25B ativos durante a inferência | 192k | US$ 0,0 | 3,2 | 185 | ||||
| North Mini Code | 3 | 30B 3B ativos durante a inferência | 256k | US$ 0,0 | 3,8 | 134 | ||||
| Command A | - | 111B | 256k | US$ 3,3 | - | 26 | ||||
| Command-R+ (Apr '24) | - | 104B | 128k | - | - | - | - | |||
| Tiny Aya Global | - | 3.4B | 8k | US$ 0,0 | - | 130 | ||||
| Command-R (Mar '24) | - | 35B | 128k | - | - | - | - |