Todos os lançamentos••

Open weights model

•

Released dezembro de 2024

Análise de inteligência, desempenho e preço do Llama 3.3 Instruct 70B

Resumo do modelo

N/D
Artificial Analysis Intelligence Index
Valor desconhecido entre 4 unidades para Inteligência.
Tempo até o primeiro token da resposta final 1.71sVelocidade de saída 76 tok/s
N/D
Tempo por tarefa do Intelligence Index (minutos)
Valor desconhecido entre 4 unidades para Desempenho.
Entrada $0.60Saída $0.71
N/D
Custo por tarefa do Intelligence Index
Valor desconhecido entre 4 unidades para Custo.

Verbosidade

N/D
Tokens de saída do Intelligence Index
Valor desconhecido entre 4 unidades para Verbosidade.

Llama 3.3 Instruct 70B aceita entrada em texto, gera saída em texto e tem uma janela de contexto de 128k tokens, com conhecimento até dezembro de 2023.

O preço do Llama 3.3 Instruct 70B é de $0.60 por 1M de tokens de entrada (preço um pouco alto, mediana: $0.45) e $0.71 por 1M de tokens de saída (preço moderado, mediana: $0.71).

Updated
Artificial Analysis Intelligence Index · Higher is better
No publicly available API
Inference time (minutes) per Intelligence Index task · Lower is better
No publicly available API
Weighted average cost (USD) per Intelligence Index task · Lower is better
No publicly available API

InteligênciaUpdated

Artificial Analysis Intelligence Index

Artificial Analysis Intelligence Index v5.0.1 incorporates 9 evaluations: AA-Briefcase v1.1, AutomationBench-AA, Terminal-Bench 4.0, FrontierCode-AA 2.0, AA-Omniscience v1.1, GDP.pdf, HLE-Diamond, CritPt v2 (Hard Subset), and Terminal-Bench-Science 0.1

Artificial Analysis Intelligence Index: pesos abertos vs. proprietários

Artificial Analysis Intelligence Index v5.0.1 incorporates 9 evaluations: AA-Briefcase v1.1, AutomationBench-AA, Terminal-Bench 4.0, FrontierCode-AA 2.0, AA-Omniscience v1.1, GDP.pdf, HLE-Diamond, CritPt v2 (Hard Subset), and Terminal-Bench-Science 0.1

Intelligence Index vs. custo por tarefa

Artificial Analysis Intelligence Index · Weighted average cost (USD) per Artificial Analysis Intelligence Index task
Most attractive quadrant
Pareto line

Evaluations

Intelligence evaluations measured independently by Artificial Analysis · Higher is better
Ver mais

Agentic real-world work tasks, Elo

Kubernetes incident root-cause analysis

Openness Index

Artificial Analysis Openness Index: pontuação

O Openness Index avalia a abertura dos modelos em uma escala normalizada de 0 a 100 (quanto maior, mais aberto)

Custo

Custo por tarefa do Intelligence Index

Weighted average cost (USD) per Intelligence Index task · Segmented by token type · Lower is better

Custo de executar o Artificial Analysis Intelligence Index

Cost (USD) to run all evaluations in the Artificial Analysis Intelligence Index

Preços: acertos de cache, entrada e saída

Price (USD per M Tokens)

Desempenho

Medido pelo tempo por tarefa (minutos), pela velocidade de saída (tokens por segundo), pelo tempo até o primeiro token da resposta final e pelo tempo até o primeiro token (segundos)

Tempo por tarefa do Intelligence Index

Output tokens divided by end-to-end output speed (minutes per Intelligence Index task) · Speed at the model's own endpoint or the median across providers · Lower is better

Velocidade de saída

Output tokens divided by total request time, including time to first token · Higher is better

Tempo até o primeiro token da resposta final

Segundos até receber o primeiro token da resposta final · Inclui o tempo de “pensamento” dos modelos de raciocínio

Janela de contexto

Janela de contexto

Context window: tokens limit · Higher is better

Tamanho do modelo (somente modelos de pesos abertos)

Tamanho do modelo: parâmetros totais e ativos

Comparison between total model parameters and parameters active during inference (billions)

Mais detalhes

Pesos
Llama 3.3 Instruct 70B
Logo: MetaMeta
-
70B
128k
$0.61
-
76
Amazon BedrockCoreWeaveDeepInfra
+6

Perguntas frequentes

Perguntas comuns sobre o Llama 3.3 Instruct 70B