•

Open weights model

•

Released dezembro de 2024

Phi-4 Benchmarking e análise de provedores de API

Comparação de modelos

Esta análise ajuda você a escolher o melhor provedor de API de Phi-4 para seu caso de uso.

Mais rápido

#1
DeepInfraDeepInfra
74.4 t/s
#2
AzureAzure
38.7 t/s

Velocidade de saída

2 provedores no total

Menor latência

#1
DeepInfraDeepInfra
1.02 s
#2
AzureAzure
2.59 s

Tempo até o primeiro token

2 provedores no total

Menor preço

#1
DeepInfraDeepInfra
$0.08
#2
AzureAzure
$0.16

Preço combinado (por 1M de tokens)

2 provedores no total

Phi-4 está disponível em 2 provedores de API, cada um com características de desempenho e preços diferentes. Veja abaixo uma comparação das principais métricas entre os provedores.

  • Em velocidade de saída, os principais provedores são DeepInfra (74.4 t/s) e Azure (38.7 t/s).
  • Em latência, DeepInfra (1.02s) e Azure (2.59s) têm o menor tempo até o primeiro token.
  • Em preço, DeepInfra (0.08) e Azure (0.16) têm os menores preços combinados por 1M de tokens.
  • DeepInfra se destaca na liderança geral, ocupando o primeiro lugar nas três categorias: velocidade, latência e preço.
Output tokens per second · Higher is better
Seconds to first answer token received · Lower is better
USD per 1M tokens (blended) · Lower is better

Atualização: A carga de trabalho padrão do benchmarking de desempenho passou a usar 10k tokens de entrada para representar melhor os casos de uso em produção. Você ainda pode selecionar outras cargas de trabalho acima.

Preços

Preços: acertos de cache, entrada e saída

Price (USD per M Tokens) · Lower is better · 10,000 input tokens

Preços: Preço combinado

Blended at 7:2:1 (cache-input-output) · USD per 1M tokens (blended) · Lower is better

Velocidade de saída vs. preço

Blended at 7:2:1 (cache-input-output) · Output speed: output tokens per second · USD per 1M tokens (blended)
Most attractive quadrant

Velocidade

Medida pela velocidade de saída (tokens por segundo)

Velocidade de saída: Phi-4

Velocidade de saída: tokens de saída por segundo · 10,000 input tokens

Latência vs. velocidade de saída

Latency: seconds to first token received · Output speed: output tokens per second · 10,000 input tokens
Most attractive quadrant

Latência

Medida pelo tempo (segundos) até o primeiro token

Tempo até o primeiro token

Seconds to first token received · Lower is better · 10,000 input tokens

Tempo de resposta de ponta a ponta

Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed

Tempo de resposta de ponta a ponta

Seconds to output 500 tokens, including reasoning model 'thinking' time · Lower is better · 10,000 input tokens

Principais métricas de comparação e recursos da API

Logo: Microsoft AzureMicrosoft Azure
16.4k
Aberto
--
39
2.57
15.43
--
Logo: DeepInfraDeepInfra
16.4k
Aberto
--
74
0.98
7.69
--

Perguntas frequentes

Perguntas comuns sobre os provedores do Phi-4