Este modelo está obsoleto. Continuamos medindo seu desempenho, mas com menos frequência: a cada 18 horas em vez de a cada 6.

Meta lançou uma versão mais recente, Llama 3.1 Instruct 8B. Sugerimos considerá-la como alternativa.

•

Open weights model

•

Released abril de 2024

Llama 3 Instruct 8B Benchmarking e análise de provedores de API

Comparação de modelos

Esta análise ajuda você a escolher o melhor provedor de API de Llama 3 Instruct 8B para seu caso de uso.

Menor tempo por tarefa

Tempo por tarefa do Intelligence Index (minutos)

4 provedores no total

Menor custo por tarefa

Custo por tarefa do Intelligence Index

4 provedores no total

Llama 3 8B está disponível em 4 provedores de API, cada um com características de desempenho e preços diferentes. Veja abaixo uma comparação das principais métricas entre os provedores.

    Inference time (minutes) per Intelligence Index task · Lower is better
    No data available
    Weighted average cost (USD) per Intelligence Index task · Lower is better
    No data available

    Preços

    Custo por tarefa do Intelligence Index: Llama 3 Instruct 8B

    Weighted average cost (USD) per Intelligence Index task · Segmented by token type · Lower is better
    No data available

    Preços: acertos de cache, entrada e saída: Llama 3 Instruct 8B

    Price (USD per M Tokens) · Lower is better

    Velocidade de saída vs. custo por tarefa: Llama 3 Instruct 8B

    Output speed: output tokens divided by total request time, including time to first token · Weighted average cost (USD) per Intelligence Index task
    Most attractive quadrant
    No data available

    Velocidade

    Média das cargas de trabalho medidas de solicitação única e agênticas multiturno

    Velocidade de saída: Llama 3 Instruct 8B

    Tokens de saída divididos pelo tempo total da solicitação · Inclui o tempo até o primeiro token · Média das cargas de trabalho medidas de solicitação única e agênticas multiturno · Quanto maior, melhor

    Latência

    Média das cargas de trabalho medidas de solicitação única e agênticas multiturno

    Tempo até o primeiro token da resposta final: Llama 3 Instruct 8B

    Segundos até o primeiro token da resposta final após qualquer raciocínio · Média das cargas de trabalho medidas de solicitação única e agênticas multiturno · Quanto menor, melhor

    Confiabilidade

    Parcela de solicitações em que o endpoint falhou, em todas as cargas de trabalho medidas de solicitação única e agênticas multiturno

    Taxa de erros do endpoint: Llama 3 Instruct 8B

    Parcela de solicitações em que o endpoint falhou por erro, limite de taxa ou tempo esgotado · Em todas as cargas de trabalho medidas de solicitação única e agênticas multiturno · Quanto menor, melhor

    Principais métricas de comparação e recursos da API

    Logo: Amazon BedrockAmazon Bedrock
    --
    --
    --
    --
    8k
    Aberto
    Logo: DeepInfraDeepInfra
    --
    --
    0.47
    0.0%
    8k
    Aberto
    Logo: NovitaNovita
    --
    --
    --
    --
    8k
    Aberto
    Logo: ReplicateReplicate
    --
    --
    0.49
    16.7%
    8k
    Aberto

    Perguntas frequentes

    Perguntas comuns sobre os provedores do Llama 3 Instruct 8B