Todos os lançamentos

Mistral Large 4 vs. Hermes 4 - Llama-3.1 70B: comparação de lançamentos

Comparação dos lançamentos Mistral Large 4 e Hermes 4 - Llama-3.1 70B: 2 e 2 modelos, respectivamente, cada um com diferentes características de inteligência, desempenho e preço. Abaixo, comparamos as principais métricas dos 4 modelos.

Playground de modelos

Lançamentos comparados

Mistral Large 4 (high)Mistral Large 4 (medium)Hermes 4 70BHermes 4 70B (non-reasoning)
Intelligence Index
26
23
--
--
Finanças e Contabilidade
39
35
--
--
Estratégia e Operações
43
39
--
--
Jurídico
35
31
--
--
Saúde e Medicina
--
--
--
--
Custo por tarefaUSD
$2.06
$1.41
--
--
Velocidade de saídaTokens/s
161
--
--
--
Tempo até o primeiro tokens
1,42
--
--
--
Janela de contexto
1M
1M
128k
128k
Criador
Mistral
Mistral
Nous Research
Nous Research
Licença
Aberto
Aberto
Aberto
Aberto
Modalidade de entrada

Compatível com: texto e imagem

Compatível com: texto e imagem

Compatível com: texto

Compatível com: texto

Modalidade de saída

Compatível com: texto

Compatível com: texto

Compatível com: texto

Compatível com: texto

Provedores
Mistral
Mistral
--
--
Updated
Artificial Analysis Intelligence Index · Higher is better
Output tokens per second · Higher is better
Weighted average cost (USD) per Intelligence Index task · Lower is better

InteligênciaUpdated

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v5.0 incorporates 9 evaluations: AA-Briefcase v1.1, AutomationBench-AA, Terminal-Bench 4.0, FrontierCode 2.0, AA-Omniscience v1.1, GDP.pdf, HLE-Diamond, CritPt v2 (Hard Subset), and Terminal-Bench-Science 0.1

Intelligence Index vs. custo por tarefa

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task
Most attractive quadrant
Mistral Large 4
Pareto line

Custo por tarefa (USD, escala logarítmica)

Custo

Custo por tarefa do Intelligence Index

Weighted average cost (USD) per Intelligence Index task · Segmented by token type · Lower is better

Velocidade e latência

Velocidade de saída

Output tokens per second · Higher is better

Pontuações de capacidades

Índices de capacidades

Mede o desempenho dos modelos em capacidades e setores específicos
Finance & Accounting Index

Incorporates 5 evaluations: AA-Briefcase v1.1, AA-Omniscience v1.1, HLE-Diamond, AutomationBench-AA, GDP.pdf · Higher is better

Strategy & Ops Index

Incorporates 4 evaluations: AutomationBench-AA, AA-Briefcase v1.1, AA-Omniscience v1.1, GDP.pdf · Higher is better

Legal Index

Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, HLE-Diamond, GDP.pdf, AutomationBench-AA · Higher is better

Healthcare & Medical Index

Incorporates 5 evaluations: AA-Omniscience v1.1, AA-Briefcase v1.1, MLCR-AA, AutomationBench-AA, HLE-Diamond · Higher is better

Engineering Index

Incorporates 7 evaluations: AA-Omniscience v1.1, CritPt v2 (Hard Subset), Terminal-Bench-Science 0.1, HLE-Diamond, Terminal-Bench 4.0, FrontierCode 2.0, AA-Briefcase v1.1 · Higher is better

Economics Index

Incorporates 4 evaluations: AA-Briefcase v1.1, AA-Omniscience v1.1, HLE-Diamond, GDP.pdf · Higher is better