Membro da equipe técnica (Pesquisa aplicada em IA)

Sobre a Artificial Analysis

A Artificial Analysis é a principal empresa independente de benchmarks de IA. Ajudamos laboratórios, engenheiros e empresas a entender as capacidades da IA e tomar decisões fundamentais sobre suas estratégias de IA. Somos a autoridade de referência para compreender a IA, atendendo desde laboratórios e empresas até veículos de imprensa, investidores e formuladores de políticas públicas. Nossos benchmarks não apenas medem a fronteira da IA: eles ajudam ativamente a defini-la.

Nossos benchmarks e análises contam com a confiança de centenas de milhares de usuários e são a principal referência para laboratórios de IA como OpenAI, Google, Meta, NVIDIA e Anthropic, além de grandes publicações como The Wall Street Journal, Bloomberg, Financial Times e The Economist.

Somos uma equipe de mais de 40 pessoas, a caminho de triplicar até o fim do ano, com o apoio de Nat Friedman (Github, Meta), Daniel Gross (SSI), Andrew Ng (Google Brain, DeepLearning.ai, Amazon), Adam D'Angelo (Quora, Poe, OpenAI), Clem Delangue (Hugging Face) e outros líderes do setor.

A oportunidade

Nossas avaliações determinam como o mundo mede a IA. Quando um laboratório de fronteira lança um modelo, nossos benchmarks mostram ao setor o que ele realmente consegue fazer, e os próprios laboratórios usam nossos resultados para orientar o que desenvolverão em seguida. Esta função coloca você na fronteira da medição: você não apenas observará a vanguarda, mas seu trabalho definirá o que estar na vanguarda significa.

Estamos contratando membros da equipe técnica (Pesquisa aplicada em IA) para criar as avaliações que estabelecem o padrão de medição da IA: desenvolver novos benchmarks e conjuntos de dados, avaliar todos os principais modelos conforme forem lançados, trabalhar com laboratórios de fronteira em modelos antes que o mundo os conheça e publicar as análises das quais dependem laboratórios, empresas, veículos de imprensa e formuladores de políticas públicas. O parâmetro de sucesso é se tornar uma autoridade mundial em IA moderna.

Esta é uma pesquisa aplicada com consequências imediatas para o setor: ciclos mais curtos do que na academia, mais rigor do que nos comentários do setor e um público maior do que ambos. O foco da função é construir: a grande maioria do seu tempo será dedicada a criar e lançar avaliações, com análises e colaboração com o setor em torno desse trabalho.

O que você fará

• Criar avaliações de fronteira: conceber, desenvolver e lançar novas metodologias de avaliação que aprimorem a medição das capacidades da IA e se mantenham à frente do que os modelos de fronteira conseguem fazer
• Criar conjuntos de dados e infraestrutura de avaliação: desenvolver os conjuntos de dados, sistemas de execução e sistemas de pontuação por trás dos nossos benchmarks, projetados para resistir à contaminação e garantir a reprodutibilidade em escala de fronteira
• Avaliar todos os principais modelos: executar nosso conjunto de avaliações em cada lançamento de fronteira e assumir a responsabilidade pela integridade dos resultados citados pelo setor
• Publicar análises influentes: produzir relatórios, índices e visualizações de dados que definam como laboratórios, empresas e o setor em geral compreendem o progresso da IA
• Trabalhar com laboratórios de fronteira em modelos antes do lançamento: avaliar os sistemas dos principais laboratórios, incluindo modelos ainda não lançados e recém-lançados, trabalhando diretamente com suas equipes de pesquisa; nossa equipe comercial cuida diariamente do relacionamento com os clientes, para que seu tempo permaneça dedicado à ciência
• Tornar-se nativo em IA: adotar um fluxo de trabalho nativo em IA, usando ferramentas de IA de ponta para ampliar a produtividade em um setor em rápida transformação e manter nossa vantagem competitiva em benchmarks de IA

O que buscamos

Exigimos mais de 3 anos de experiência profissional relevante, no setor ou em pesquisa. Você tem enorme interesse por IA, o desejo de se tornar uma autoridade mundial na área e sólidas habilidades analíticas e de programação para sustentar essa ambição.

Além desse requisito, contratamos pessoas com três tipos de experiência. Você deve se encaixar claramente em um destes perfis:

IA e machine learning

Os perfis incluem: ML Engineer, ML Researcher, Research Engineer, AI Engineer, Forward Deployed Engineer, Technical PM ou funções semelhantes em empresas de IA ou equipes voltadas à IA.

Você tem experiência prática com sistemas modernos de IA e entende tecnicamente como os modelos funcionam. Quer que seu trabalho seja lançado mais rápido do que um artigo acadêmico e tenha mais impacto do que um painel: avaliações vistas por todo o setor, em ciclos medidos em dias.

Consultoria estratégica

Os perfis incluem: Management Consultant, Associate, Engagement Manager, Data Scientist ou funções semelhantes em empresas como McKinsey, BCG, Bain ou equivalentes. Daremos forte preferência a candidatos com experiência em uma divisão de Data Analytics, como QuantumBlack, AI by McKinsey, BCG X ou equivalente.

Você sabe estruturar problemas ambíguos, criar modelos analíticos e comunicar conclusões a stakeholders seniores. O principal diferencial: interesse técnico genuíno por IA e capacidade de programar. Você acompanha os lançamentos de modelos, tem opiniões sobre os rumos da tecnologia e quer estar mais perto do tema do que a consultoria permite.

Gestão técnica de produtos

Os perfis incluem: Founding Engineer, Product Manager, cofundador técnico, Head of Product ou funções generalistas em empresas de IA em estágio inicial.

Você criou e lançou produtos de IA em um ambiente dinâmico, atuando simultaneamente em pesquisa, engenharia, produto e atividades comerciais. Busca uma função em que essa amplitude seja o trabalho, e não um efeito colateral de ter entrado cedo em uma empresa pequena.

Nos três perfis, exigimos:

• Sólidas habilidades analíticas e de pensamento crítico
• Proficiência em Python e análise de dados
• Interesse e conhecimento genuínos e comprováveis em IA de fronteira. Queremos pessoas com opiniões bem fundamentadas sobre os rumos da IA, não apenas pessoas que usam ferramentas de IA

Por que a Artificial Analysis?

• Ajude a definir como a IA é construída: os principais laboratórios de IA acompanham nossos benchmarks e os usam para orientar suas prioridades de desenvolvimento. Seu trabalho influenciará diretamente os rumos da IA.
• Torne-se uma autoridade mundial em IA: você avaliará todos os principais modelos, em todas as grandes capacidades, conforme forem lançados. Pouquíssimas funções oferecem uma exposição tão ampla à IA de fronteira.
• Trabalhe com os participantes mais importantes da IA: você gerenciará o relacionamento com equipes dos principais laboratórios de IA e grandes empresas, atuando como uma voz independente e confiável.
• Junte-se a nós em um momento decisivo: somos mais de 40 pessoas, a caminho de dobrar até o fim do ano, com o apoio de alguns dos investidores mais bem relacionados da IA. Quem entrar agora ajudará a definir o produto, a equipe e a estratégia durante nosso crescimento.
• Remuneração competitiva, incluindo participação societária