Miembro del equipo técnico (inferencia)
Sobre Artificial Analysis
Artificial Analysis es la empresa independiente líder en benchmarking de IA. Ayudamos a laboratorios, ingenieros y empresas a entender las capacidades de la IA y a tomar decisiones críticas sobre sus estrategias de IA. Somos la referencia para entender la IA, desde laboratorios y empresas hasta medios, inversores y responsables de políticas públicas. Nuestros benchmarks no solo miden la frontera de la IA: ayudan activamente a definirla.
Nuestros benchmarks y análisis cuentan con la confianza de cientos de miles de usuarios y son una referencia para laboratorios de IA líderes como OpenAI, Google, Meta, NVIDIA y Anthropic, y para publicaciones como The Wall Street Journal, Bloomberg, Financial Times y The Economist.
Somos un equipo de más de 40 personas, en camino de triplicarnos antes de fin de año, respaldado por Nat Friedman (Github, Meta), Daniel Gross (SSI), Andrew Ng (Google Brain, DeepLearning.ai, Amazon), Adam D'Angelo (Quora, Poe, OpenAI), Clem Delangue (Hugging Face) y otros líderes de la industria.
La oportunidad
La inferencia de modelos de lenguaje es el mercado que más rápido se mueve en la IA: decenas de proveedores, cambios constantes de precio y rendimiento, y decisiones de despliegue por miles de millones de dólares que dependen de datos independientes. Nuestros benchmarks de inferencia son el punto de referencia de la industria, y estamos contratando a un miembro del equipo técnico para impulsarlos.
Liderarás la cobertura del panorama de inferencia serverless: evaluando endpoints en calidad, velocidad y precio, ampliando nuestra metodología a nuevas dimensiones como el precio con caché, la precisión de los endpoints y el rendimiento agentic, y trabajando directamente con los proveedores de inferencia y neoclouds que lanzan sobre la base de nuestras cifras.
Qué harás
- Benchmarking del panorama de inferencia: liderar la cobertura de rendimiento y precio de la inferencia serverless por API en todo el ecosistema de proveedores, desde laboratorios de frontera hasta proveedores especializados
- Ampliar nuestra metodología: impulsar nuevas dimensiones de benchmarking, incluyendo el precio con caché, la precisión de los endpoints y el rendimiento agentic, manteniendo nuestra medición por delante de cómo despliega la industria
- Colaborar con proveedores: trabajar directamente con proveedores de inferencia y neoclouds para evaluar sus endpoints, resolver dudas de metodología y definir cómo el mercado mide el rendimiento de servido
- Analizar el mercado: producir el análisis que la industria usa para entender el rendimiento y la economía de la inferencia, desde el throughput y el tiempo hasta el primer token hasta las fronteras de precio-rendimiento
- Impulsar la dirección de producto: dar forma al roadmap de nuestra plataforma de benchmarking de inferencia junto con nuestros ingenieros y el líder del pilar
- Adoptar un flujo de trabajo AI-native: usar herramientas de IA de vanguardia para generar apalancamiento en una industria que cambia rápido y mantener nuestra ventaja competitiva en benchmarking de IA
Qué buscamos
Deberías conocer el mercado de la inferencia desde dentro.
Perfiles habituales: roles de ingeniería, producto, developer relations o go-to-market técnico en proveedores de inferencia y neoclouds (por ejemplo Together AI, Fireworks, Baseten, Cerebras, Novita, Parasail, DeepInfra, Modal, CoreWeave, Lambda, Nebius, Crusoe o similares), o equipos que sirven modelos en producción a escala.
Requisitos:
- Más de 3 años de experiencia profesional, incluidos al menos 2 años en —o trabajando estrechamente con— proveedores de inferencia, neoclouds o equipos que sirven modelos en producción
- Sólidas habilidades analíticas y de pensamiento crítico
- Dominio de Python y análisis de datos
- Familiaridad práctica con el stack de servido de modelos (por ejemplo vLLM, SGLang, TensorRT-LLM) y con las APIs de inferencia de distintos proveedores
- Fluidez en las métricas y la economía del rendimiento de inferencia: tokens por segundo, tiempo hasta el primer token, compromisos entre throughput y latencia, coste por token
- Interés y conocimiento genuinos y demostrables de la IA de frontera; buscamos personas con opiniones informadas sobre hacia dónde va la IA, no solo personas que usan herramientas de IA
¿Por qué Artificial Analysis?
- Influye en cómo se construye la IA: los laboratorios líderes siguen nuestros benchmarks y los usan para guiar sus prioridades de desarrollo. Tu trabajo influirá directamente en la dirección de la IA.
- Conviértete en experto/a mundial en IA: evaluarás todos los modelos principales, en todas las capacidades relevantes, a medida que se lanzan. Muy pocos puestos ofrecen esta amplitud de exposición a la IA de frontera.
- Trabaja con los actores más importantes de la IA: gestionarás relaciones con equipos de los principales laboratorios de IA y grandes empresas como una voz independiente y de confianza.
- Únete en un momento decisivo: somos más de 40 personas, en camino de duplicarnos antes de fin de año, respaldados por algunos de los inversores mejor conectados en IA. Quienes se unan ahora darán forma al producto, al equipo y a la estrategia mientras escalamos.
- Compensación competitiva, incluida participación accionaria