Hermes 4 - Llama-3.1 405B: inteligência, desempenho e preço do lançamento
Provedores disponíveis
Resumo do modelo
Verbosidade
O lançamento Hermes 4 - Llama-3.1 405B oferece 2 modelos, cada um com diferentes características de inteligência, desempenho e preço. Abaixo, comparamos as principais métricas dos 2 modelos.
- Em inteligência, o principal modelo do Hermes 4 - Llama-3.1 405B é Hermes 4 - Llama-3.1 405B (Reasoning), com 7 (estimativa).
- Em velocidade de saída, o modelo mais rápido é Hermes 4 - Llama-3.1 405B (Non-reasoning), com 43 tokens/s.
- Em latência, Hermes 4 - Llama-3.1 405B (Non-reasoning), com 2,28 s oferece o menor tempo até o primeiro token de resposta.
| Modalidade de entrada | Compatível com: texto |
|---|---|
| Modalidade de saída | Compatível com: texto |
| Janela de contexto | 128k ~192 páginas A4 em fonte Arial tamanho 12 |
| Parâmetros totais | 406B |
| Licença | META LLAMA 3 COMMUNITY LICENSE AGREEMENT |
| Pesos do modelo | Hugging Face |
As métricas são comparadas com modelos da mesma classe:
- Modelos sem raciocínio → comparados apenas com outros modelos sem raciocínio
- Modelos de raciocínio → comparados com modelos com e sem raciocínio
- Modelos de pesos abertos → comparados apenas com outros modelos de pesos abertos da mesma classe de tamanho:
- Muito pequeno: ≤4B parâmetros
- Pequeno: 4B–40B parâmetros
- Médio: 40B–150B parâmetros
- Grande: >150B parâmetros
- Modelos proprietários → comparados com modelos proprietários e de pesos abertos da mesma faixa de preço, usando uma proporção combinada de 3:1 entre os preços de entrada e saída:
- <$0.15 por 1M de tokens
- $0.15–$1 por 1M de tokens
- >$1 por 1M de tokens
Inteligência
Artificial Analysis Intelligence Index
Intelligence Index vs. custo por tarefa
Custo
Custo por tarefa do Intelligence Index
Velocidade e latência
Velocidade de saída
Pontuações de capacidades
Índices de capacidades
Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better
Incorporates 6 evaluations: GDPval-AA v2.1, AA-Briefcase v1.1, AA-Omniscience, AutomationBench-AA, AA-LCR v1.1, GDP.pdf · Higher is better
Incorporates 7 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, Humanity's Last Exam, AA-LCR v1.1, GDP.pdf, AutomationBench-AA · Higher is better
Incorporates 6 evaluations: AA-Omniscience, GDPval-AA v2.1, AA-Briefcase v1.1, MLCR-AA, Humanity's Last Exam, AutomationBench-AA · Higher is better
Incorporates 6 evaluations: AA-Omniscience, Humanity's Last Exam, CritPt, GDPval-AA v2.1, AA-Briefcase v1.1, Terminal-Bench 4.0 · Higher is better
Incorporates 5 evaluations: AA-Omniscience, Humanity's Last Exam, GDPval-AA v2.1, AA-Briefcase v1.1, AA-LCR v1.1 · Higher is better
Evaluations
Knowledge
1 - hallucination rate
Reasoning & knowledge
Long context reasoning
Physics reasoning
Mais lançamentos de Nous Research
Mais detalhes
Pesos | Benchmarks de provedores | ||||||||
|---|---|---|---|---|---|---|---|---|---|
| Hermes 4 - Llama-3.1 405B (Reasoning) |  Nous Research | 7 | 406B | 128k | US$ 1,2 | 43 |  | ||
| Hermes 4 - Llama-3.1 405B (Non-reasoning) | Nous Research | 7 | 406B | 128k | US$ 1,2 | 43 | |