gpt-oss-120b (low) Benchmarks y análisis de proveedores de API
Análisis de proveedores de API para gpt-oss-120b (low) en métricas de rendimiento como latencia (tiempo hasta el primer token), velocidad de salida (tokens de salida por segundo), precio y otras. Los proveedores de API medidos incluyen Snowflake, Hyperbolic, Nebius Base, SambaNova, Google Vertex, CoreWeave, Cerebras, Microsoft Azure, Cloudflare, Baseten, Amazon Bedrock, Parasail, Together AI, Groq, Clarifai y Novita.
Más rápido
Velocidad de salida
16 proveedores en total
Menor latencia
Tiempo hasta el primer token de respuesta
16 proveedores en total
Menor precio
Precio combinado (por 1M de tokens)
16 proveedores en total
gpt-oss-120b (low) está disponible a través de 16 proveedores de API, cada uno con distintas características de rendimiento y precios. A continuación se comparan las métricas clave entre proveedores.
- En velocidad de salida, los principales proveedores son Cerebras (1,657.8 t/s), SambaNova (723.1 t/s) y Groq (476.5 t/s). La velocidad varía significativamente entre proveedores, con una diferencia del 3628% entre el más rápido y el más lento.
- En latencia, Cerebras (1.73s), SambaNova (4.05s) y Groq (4.95s) ofrecen el menor tiempo hasta el primer token de respuesta.
- En precios, CoreWeave (0.04), Novita (0.07) y Google Vertex (0.12) ofrecen los menores precios combinados por 1M de tokens. Los precios varían hasta 8.9x entre proveedores.
- Cerebras ofrece el mejor rendimiento, con la mayor velocidad y la menor latencia. Para optimizar costos, CoreWeave ofrece los precios más competitivos.
Aspectos destacados
Actualización: La carga de trabajo predeterminada de medición de rendimiento se actualizó a 10k tokens de entrada para reflejar mejor los casos de uso en producción. Aún puedes seleccionar distintas cargas de trabajo arriba.
Precios
Pricing: Cache Hit, Input, and Output
Pricing: Blended Price
Pricing: Cache Discount
Output Speed vs. Price
Velocidad
Medida por la velocidad de salida (tokens por segundo)
Output Speed: gpt-oss-120b (low)
Latency vs. Output Speed
Latencia
Medida por el tiempo (segundos) hasta el primer token
Tiempo hasta el primer token de respuesta
Tiempo de respuesta de extremo a extremo
Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed
Tiempo de respuesta de extremo a extremo
Métricas clave de comparación y funciones de API
131k | Abierto | $0.03 | -- | -- | -- | -- | |||
131k | Abierto | $0.04 | -- | -- | -- | -- | |||
128k | Abierto | $0.02 | 275 | 1.00 | 10.10 | 7.28 | |||
131k | Abierto | $0.03 | 723 | 1.29 | 4.74 | 2.77 | |||
131k | Abierto | $0.01 | 82 | 2.31 | 32.94 | 24.51 | |||
131k | Abierto | $0.0042 | 44 | 1.44 | 57.66 | 44.98 | |||
131k | Abierto | $0.05 | 1,658 | 0.52 | 2.03 | 1.21 | |||
131k | Abierto | $0.02 | 330 | 0.76 | 8.34 | 6.06 | |||
128k | Abierto | $0.05 | -- | -- | -- | -- | |||
128k | Abierto | $0.01 | 338 | 0.21 | 7.62 | 5.92 | |||
131k | Abierto | $0.02 | 70 | 0.95 | 36.86 | 28.73 | |||
131k | Abierto | -- | 115 | 0.81 | 22.63 | 17.46 | |||
131k | Abierto | $0.02 | 78 | 0.83 | 32.94 | 25.69 | |||
131k | Abierto | $0.02 | 477 | 0.75 | 6.00 | 4.20 | |||
131k | Abierto | $0.01 | -- | -- | -- | -- | |||
131k | Abierto | $0.01 | 96 | 0.87 | 26.95 | 20.86 | |||
Preguntas frecuentes
Preguntas comunes sobre los proveedores de gpt-oss-120b (low)
gpt-oss-120b (low) está disponible a través de 16 proveedores de API: Snowflake, Hyperbolic, Nebius Base, SambaNova, Google Vertex, CoreWeave, Cerebras, Azure, Cloudflare, Baseten, Amazon, Parasail, Together AI, Groq, Clarifai y Novita. Cada proveedor ofrece distintas características de rendimiento y precios.
gpt-oss-120b (low) está disponible actualmente a través de 16 proveedores de API que medimos y monitoreamos.
Los proveedores más económicos para gpt-oss-120b (low) por precio combinado son CoreWeave ($0.04 por 1M de tokens), Novita ($0.07 por 1M de tokens) y Google Vertex ($0.12 por 1M de tokens). El precio combinado usa una proporción 7:2:1 de aciertos de caché/entrada/salida.
Los proveedores con el menor precio de tokens de entrada para gpt-oss-120b (low) son CoreWeave ($0.03 por 1M de tokens de entrada), Novita ($0.05 por 1M de tokens de entrada) y Google Vertex ($0.09 por 1M de tokens de entrada).
Los 16 proveedores de gpt-oss-120b (low) admiten el modo JSON para salida estructurada.
15 de 16 proveedores admiten llamadas a funciones para gpt-oss-120b (low): Hyperbolic, Nebius Base, SambaNova, Google Vertex, CoreWeave, Cerebras, Azure, Cloudflare, Baseten, Amazon, Parasail, Together AI, Groq, Clarifai y Novita.
Al elegir un proveedor para gpt-oss-120b (low), considera: velocidad de salida (para tareas intensivas en rendimiento), latencia (para aplicaciones interactivas que requieren primeras respuestas rápidas), precios (para cargas de trabajo sensibles al costo) y funciones de API como el modo JSON o las llamadas a funciones.
Sí, el rendimiento de un proveedor puede variar con el tiempo debido a cambios de infraestructura, balanceo de carga y actualizaciones. Medimos continuamente a todos los proveedores y mostramos las tendencias históricas de rendimiento en los gráficos "a lo largo del tiempo".
Para información sobre la inteligencia, las capacidades, las modalidades de gpt-oss-120b (low) y cómo se compara con otros modelos, consulta la página de resumen del modelo. Ver resumen del modelo