This model is deprecated. We only continue performance benchmarking for the default 10k input token workload. Results for other workloads are historical and no longer updated.
Mistral has launched a newer model, Ministral 3 8B. We suggest considering it instead.
For more information, see comparison of Ministral 3 8B to other models and API provider benchmarks for Ministral 3 8B.
Mistral 7B Instruct Benchmarking e análise de provedores de API
Esta análise ajuda você a escolher o melhor provedor de API de Mistral 7B Instruct para seu caso de uso.
Mais rápido
MistralVelocidade de saída
2 provedores no total
Menor latência
MistralTempo até o primeiro token
2 provedores no total
Menor preço
AmazonMistralPreço combinado (por 1M de tokens)
2 provedores no total
Mistral 7B está disponível em 2 provedores de API, cada um com características de desempenho e preços diferentes. Veja abaixo uma comparação das principais métricas entre os provedores.
- Em velocidade de saída, os principais provedores são Mistral (84.0 t/s).
- Em latência, Mistral (0.74s) têm o menor tempo até o primeiro token.
- Em preço, Amazon (0.15) e Mistral (0.25) têm os menores preços combinados por 1M de tokens.
- Mistral oferece o melhor desempenho, com a maior velocidade e a menor latência. Para otimizar os custos, Amazon tem o preço mais competitivo.
Destaques
Preços
Pricing: Cache Hit, Input, and Output
Pricing: Blended Price
Output Speed vs. Price
Velocidade
Medida pela velocidade de saída (tokens por segundo)
Output Speed: Mistral 7B Instruct
Latency vs. Output Speed
Latência
Medida pelo tempo (segundos) até o primeiro token
Tempo até o primeiro token
Tempo de resposta de ponta a ponta
Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed
Tempo de resposta de ponta a ponta
Principais métricas de comparação e recursos da API
Perguntas frequentes
Perguntas comuns sobre os provedores do Mistral 7B Instruct
Atualmente, o Mistral 7B Instruct está disponível em 2 provedores de API que avaliamos e acompanhamos.
O provedor mais rápido para o Mistral 7B Instruct em velocidade de saída é Mistral (84.0 t/s). A velocidade de saída mede a rapidez com que os tokens são gerados depois que o modelo começa a responder.
O provedor com o menor tempo até o primeiro token para o Mistral 7B Instruct é Mistral (0.74s). Uma latência menor significa um tempo de resposta inicial mais rápido.
1 de 2 provedores são compatíveis com o modo JSON para o Mistral 7B Instruct: Mistral.
1 de 2 provedores são compatíveis com chamadas de funções para o Mistral 7B Instruct: Mistral.
Ao escolher um provedor para o Mistral 7B Instruct, considere a velocidade de saída (para tarefas que exigem alta vazão), a latência (para aplicações interativas que precisam de respostas iniciais rápidas), o preço (para cargas de trabalho atentas aos custos) e os recursos da API, como modo JSON e chamadas de funções.
Sim. O desempenho dos provedores pode variar ao longo do tempo devido a mudanças na infraestrutura, balanceamento de carga e atualizações. Avaliamos continuamente todos os provedores e exibimos as tendências históricas de desempenho nos gráficos de evolução ao longo do tempo.
Para saber mais sobre a inteligência, as capacidades e as modalidades do Mistral 7B Instruct, além de como ele se compara a outros modelos, consulte a página de visão geral do modelo. Ver visão geral do modelo