gpt-oss-20b (low) Benchmarks y análisis de proveedores de API
Análisis de proveedores de API para gpt-oss-20b (low) en métricas de rendimiento como latencia (tiempo hasta el primer token), velocidad de salida (tokens de salida por segundo), precio y otras. Los proveedores de API medidos incluyen Clarifai, Groq, Lightning AI, Hyperbolic, CoreWeave, Cloudflare, Amazon Bedrock, Novita y Google Vertex.
Más rápido
Velocidad de salida
9 proveedores en total
Menor latencia
Tiempo hasta el primer token de respuesta
9 proveedores en total
Menor precio
Precio combinado (por 1M de tokens)
9 proveedores en total
gpt-oss-20b (low) está disponible a través de 9 proveedores de API, cada uno con distintas características de rendimiento y precios. A continuación se comparan las métricas clave entre proveedores.
- En velocidad de salida, los principales proveedores son Groq (929.5 t/s), Lightning AI (225.0 t/s) y Google Vertex (170.1 t/s). La velocidad varía significativamente entre proveedores, con una diferencia del 927% entre el más rápido y el más lento.
- En latencia, Groq (2.96s), Lightning AI (9.62s) y Novita (18.20s) ofrecen el menor tiempo hasta el primer token de respuesta.
- En precios, CoreWeave (0.04), Novita (0.05) y Clarifai (0.06) ofrecen los menores precios combinados por 1M de tokens. Los precios varían hasta 5.3x entre proveedores.
- Groq ofrece el mejor rendimiento, con la mayor velocidad y la menor latencia. Para optimizar costos, CoreWeave ofrece los precios más competitivos.
Aspectos destacados
Actualización: La carga de trabajo predeterminada de medición de rendimiento se actualizó a 10k tokens de entrada para reflejar mejor los casos de uso en producción. Aún puedes seleccionar distintas cargas de trabajo arriba.
Precios
Pricing: Cache Hit, Input, and Output
Pricing: Blended Price
Output Speed vs. Price
Velocidad
Medida por la velocidad de salida (tokens por segundo)
Output Speed: gpt-oss-20b (low)
Latency vs. Output Speed
Latencia
Medida por el tiempo (segundos) hasta el primer token
Tiempo hasta el primer token de respuesta
Tiempo de respuesta de extremo a extremo
Seconds to output 500 tokens, calculated based on time to first token, 'thinking' time for reasoning models, and output speed
Tiempo de respuesta de extremo a extremo
Métricas clave de comparación y funciones de API
131k | Abierto | -- | -- | -- | -- | -- | |||
131k | Abierto | -- | 929 | 0.81 | 3.50 | 2.15 | |||
128k | Abierto | -- | 225 | 0.73 | 11.84 | 8.89 | |||
131k | Abierto | -- | -- | -- | -- | -- | |||
131k | Abierto | -- | 91 | 0.97 | 28.58 | 22.09 | |||
128k | Abierto | -- | -- | -- | -- | -- | |||
131k | Abierto | -- | 123 | 11.92 | 32.20 | 16.22 | |||
131k | Abierto | -- | 117 | 1.17 | 22.45 | 17.02 | |||
131k | Abierto | -- | 170 | 10.59 | 25.29 | 11.76 | |||
Preguntas frecuentes
Preguntas comunes sobre los proveedores de gpt-oss-20b (low)
gpt-oss-20b (low) está disponible a través de 9 proveedores de API: Clarifai, Groq, Lightning AI, Hyperbolic, CoreWeave, Cloudflare, Amazon, Novita y Google Vertex. Cada proveedor ofrece distintas características de rendimiento y precios.
gpt-oss-20b (low) está disponible actualmente a través de 9 proveedores de API que medimos y monitoreamos.
Los proveedores más rápidos para gpt-oss-20b (low) por velocidad de salida son Groq (929.5 t/s), Lightning AI (225.0 t/s) y Google Vertex (170.1 t/s). La velocidad de salida mide qué tan rápido se generan tokens después de que el modelo comienza a responder.
Los proveedores con el menor tiempo hasta el primer token de respuesta para gpt-oss-20b (low) son Groq (2.96s), Lightning AI (9.62s) y Novita (18.20s). Una menor latencia significa una respuesta inicial más rápida.
Los proveedores con el menor precio de tokens de salida para gpt-oss-20b (low) son Hyperbolic ($0.10 por 1M de tokens de salida), CoreWeave ($0.13 por 1M de tokens de salida) y Novita ($0.15 por 1M de tokens de salida).
Los precios de gpt-oss-20b (low) varían hasta 5.3x entre proveedores. El más económico es CoreWeave a $0.04 por 1M de tokens, mientras que Cloudflare cobra $0.21 por 1M de tokens.
Los 9 proveedores de gpt-oss-20b (low) admiten el modo JSON para salida estructurada.
7 de 9 proveedores admiten llamadas a funciones para gpt-oss-20b (low): Clarifai, Groq, Lightning AI, CoreWeave, Cloudflare, Amazon y Google Vertex.
Al elegir un proveedor para gpt-oss-20b (low), considera: velocidad de salida (para tareas intensivas en rendimiento), latencia (para aplicaciones interactivas que requieren primeras respuestas rápidas), precios (para cargas de trabajo sensibles al costo) y funciones de API como el modo JSON o las llamadas a funciones.
Sí, el rendimiento de un proveedor puede variar con el tiempo debido a cambios de infraestructura, balanceo de carga y actualizaciones. Medimos continuamente a todos los proveedores y mostramos las tendencias históricas de rendimiento en los gráficos "a lo largo del tiempo".
Para información sobre la inteligencia, las capacidades, las modalidades de gpt-oss-20b (low) y cómo se compara con otros modelos, consulta la página de resumen del modelo. Ver resumen del modelo