gpt-oss-20b (high) Benchmarks y análisis de proveedores de API
Análisis de proveedores de API para gpt-oss-20b (high) en métricas de rendimiento como latencia (tiempo hasta el primer token), velocidad de salida (tokens de salida por segundo), precio y otras. Los proveedores de API medidos incluyen CoreWeave, Amazon Bedrock, DeepInfra, Hyperbolic, Lightning AI, Cloudflare, Novita, Google Vertex, Groq y Clarifai.
Más rápido
Velocidad de salida
10 proveedores en total
Menor latencia
Tiempo hasta el primer token de respuesta
10 proveedores en total
Menor precio
Precio combinado (por 1M de tokens)
10 proveedores en total
gpt-oss-20b (high) está disponible a través de 10 proveedores de API, cada uno con distintas características de rendimiento y precios. A continuación se comparan las métricas clave entre proveedores.
- En velocidad de salida, los principales proveedores son Groq (964.0 t/s), Lightning AI (224.8 t/s) y Google Vertex (194.0 t/s). La velocidad varía significativamente entre proveedores, con una diferencia del 975% entre el más rápido y el más lento.
- En latencia, Groq (2.90s), Lightning AI (9.63s) y Novita (17.24s) ofrecen el menor tiempo hasta el primer token de respuesta.
- En precios, CoreWeave (0.04), DeepInfra (0.04) y Novita (0.05) ofrecen los menores precios combinados por 1M de tokens. Los precios varían hasta 5.3x entre proveedores.
- Groq ofrece el mejor rendimiento, con la mayor velocidad y la menor latencia. Para optimizar costos, CoreWeave ofrece los precios más competitivos.
Aspectos destacados
Actualización: La carga de trabajo predeterminada de medición de rendimiento se actualizó a 10k tokens de entrada para reflejar mejor los casos de uso en producción. Aún puedes seleccionar distintas cargas de trabajo arriba.
Precios
Pricing: Cache Hit, Input, and Output
Pricing: Blended Price
Output Speed vs. Price
Velocidad
Medida por la velocidad de salida (tokens por segundo)
Output Speed: gpt-oss-20b (high)
Latency vs. Output Speed
Latencia
Medida por el tiempo (segundos) hasta el primer token
Tiempo hasta el primer token de respuesta
Tiempo de respuesta de extremo a extremo
Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed
Tiempo de respuesta de extremo a extremo
Métricas clave de comparación y funciones de API
131k | Abierto | $0.01 | 90 | 0.95 | 28.84 | 22.31 | |||
131k | Abierto | $0.03 | 150 | 50.17 | 66.82 | 13.32 | |||
131k | Abierto | $0.01 | 100 | 0.47 | 25.59 | 20.09 | |||
131k | Abierto | $0.04 | -- | -- | -- | -- | |||
128k | Abierto | $0.02 | 225 | 0.74 | 11.86 | 8.89 | |||
128k | Abierto | $0.08 | -- | -- | -- | -- | |||
131k | Abierto | $0.02 | 125 | 1.17 | 21.25 | 16.06 | |||
131k | Abierto | $0.03 | 194 | 11.99 | 24.87 | 10.31 | |||
131k | Abierto | $0.03 | 964 | 0.82 | 3.42 | 2.07 | |||
131k | Abierto | $0.02 | -- | -- | -- | -- | |||
Preguntas frecuentes
Preguntas comunes sobre los proveedores de gpt-oss-20b (high)
gpt-oss-20b (high) está disponible a través de 10 proveedores de API: CoreWeave, Amazon, DeepInfra, Hyperbolic, Lightning AI, Cloudflare, Novita, Google Vertex, Groq y Clarifai. Cada proveedor ofrece distintas características de rendimiento y precios.
gpt-oss-20b (high) está disponible actualmente a través de 10 proveedores de API que medimos y monitoreamos.
Los proveedores más rápidos para gpt-oss-20b (high) por velocidad de salida son Groq (964.0 t/s), Lightning AI (224.8 t/s) y Google Vertex (194.0 t/s). La velocidad de salida mide qué tan rápido se generan tokens después de que el modelo comienza a responder.
Los proveedores con el menor tiempo hasta el primer token de respuesta para gpt-oss-20b (high) son Groq (2.90s), Lightning AI (9.63s) y Novita (17.24s). Una menor latencia significa una respuesta inicial más rápida.
Los proveedores con el menor precio de tokens de salida para gpt-oss-20b (high) son Hyperbolic ($0.10 por 1M de tokens de salida), CoreWeave ($0.13 por 1M de tokens de salida) y DeepInfra ($0.14 por 1M de tokens de salida).
Los precios de gpt-oss-20b (high) varían hasta 5.3x entre proveedores. El más económico es CoreWeave a $0.04 por 1M de tokens, mientras que Cloudflare cobra $0.21 por 1M de tokens.
Los 10 proveedores de gpt-oss-20b (high) admiten el modo JSON para salida estructurada.
8 de 10 proveedores admiten llamadas a funciones para gpt-oss-20b (high): CoreWeave, Amazon, DeepInfra, Lightning AI, Cloudflare, Google Vertex, Groq y Clarifai.
Al elegir un proveedor para gpt-oss-20b (high), considera: velocidad de salida (para tareas intensivas en rendimiento), latencia (para aplicaciones interactivas que requieren primeras respuestas rápidas), precios (para cargas de trabajo sensibles al costo) y funciones de API como el modo JSON o las llamadas a funciones.
Sí, el rendimiento de un proveedor puede variar con el tiempo debido a cambios de infraestructura, balanceo de carga y actualizaciones. Medimos continuamente a todos los proveedores y mostramos las tendencias históricas de rendimiento en los gráficos "a lo largo del tiempo".
Para información sobre la inteligencia, las capacidades, las modalidades de gpt-oss-20b (high) y cómo se compara con otros modelos, consulta la página de resumen del modelo. Ver resumen del modelo