Modelos de Cohere: inteligência, desempenho e preço

A Artificial Analysis avaliou 6 modelos de Cohere. Abaixo, comparamos as principais métricas desses modelos.

  • Em inteligência, o principal modelo de Cohere é Command A+, com 6.
  • Em velocidade, Command A+, com 3,2 min tem o menor tempo por tarefa.
  • Em latência, Tiny Aya Global, com 0,30 s oferece o menor tempo até o primeiro token da resposta final.
  • Em termos de preço, Command A+, com $0.00 e North Mini Code, com $0.00 oferecem o menor custo por tarefa.

InteligênciaUpdated

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v5.0.1 incorporates 9 evaluations: AA-Briefcase v1.1, AutomationBench-AA, Terminal-Bench 4.0, FrontierCode 2.0, AA-Omniscience v1.1, GDP.pdf, HLE-Diamond, CritPt v2 (Hard Subset), and Terminal-Bench-Science 0.1

Intelligence Index vs. custo por tarefa

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task
Most attractive quadrant
No data available

Custo

Custo por tarefa do Intelligence Index

Weighted average cost (USD) per Intelligence Index task · Segmented by token type · Lower is better

Velocidade e latência

Tempo por tarefa do Intelligence Index

Output tokens divided by end-to-end output speed (minutes per Intelligence Index task) · Speed at the model's own endpoint or the median across providers · Lower is better

Pontuações de capacidades

Índices de capacidades

Mede o desempenho dos modelos em capacidades e setores específicos
Finance & Accounting Index

Incorporates 5 evaluations: AA-Briefcase v1.1, AA-Omniscience v1.1, HLE-Diamond, AutomationBench-AA, GDP.pdf · Higher is better

Strategy & Ops Index

Incorporates 4 evaluations: AutomationBench-AA, AA-Briefcase v1.1, AA-Omniscience v1.1, GDP.pdf · Higher is better

Legal Index

Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf, AutomationBench-AA · Higher is better

Healthcare & Medical Index

Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, MLCR-AA, AutomationBench-AA, HLE-Diamond · Higher is better

Engineering Index

Incorporates 7 evaluations: AA-Omniscience v1.1, CritPt v2 (Hard Subset), Terminal-Bench-Science 0.1, HLE-Diamond, Terminal-Bench 4.0, FrontierCode 2.0, AA-Briefcase v1.1 · Higher is better

Economics Index

Incorporates 4 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf · Higher is better

Todos os lançamentos de Cohere

Mais detalhes

Pesos
Benchmarks de provedores
Command A+
Logo: CohereCohere
6
218B
25B ativos durante a inferência
192k
US$ 0,0
3,2
185
Cohere
North Mini Code
Logo: CohereCohere
3
30B
3B ativos durante a inferência
256k
US$ 0,0
3,8
134
Cohere
Command A
Logo: CohereCohere
-
111B
256k
US$ 3,3
-
26
CohereMicrosoft Azure
Command-R+ (Apr '24)
Logo: CohereCohere
-
104B
128k
-
-
-
-
Tiny Aya Global
Logo: CohereCohere
-
3.4B
8k
US$ 0,0
-
130
Cohere
Command-R (Mar '24)
Logo: CohereCohere
-
35B
128k
-
-
-
-