所有开放职位
技术团队(含产品)全职旧金山(现场办公)

技术团队成员(应用 AI 研究)

关于 Artificial Analysis

Artificial Analysis 是领先的独立 AI 基准测试公司。我们帮助实验室、工程师和企业理解 AI 能力,并就其 AI 战略做出关键决策。从 AI 实验室和企业,到媒体、投资者与政策制定者,我们都是了解 AI 的首选权威。我们的基准测试不仅衡量 AI 的前沿,还在积极塑造这一前沿。

我们的基准测试与分析受到数十万用户信赖,是 OpenAI、Google、Meta、NVIDIA 和 Anthropic 等领先 AI 实验室,以及《华尔街日报》、Bloomberg、《金融时报》和《经济学人》等主要媒体的首选参考。

我们是一支 40 多人的团队,有望在年底前将规模扩大至三倍,支持者包括 Nat Friedman(Github、Meta)、Daniel Gross(SSI)、Andrew Ng(Google Brain、DeepLearning.ai、Amazon)、Adam D'Angelo(Quora、Poe、OpenAI)、Clem Delangue(Hugging Face)及其他行业领袖。

职位机会

我们的评估决定了世界如何衡量 AI。当前沿实验室发布模型时,行业通过我们的基准测试了解其真实能力,实验室自身也会用我们的结果指导下一步构建方向。这个职位让你置身衡量前沿:你不仅会观察尖端进展,你的工作还将定义何为尖端。

我们正在招聘技术团队成员(应用 AI 研究),负责设计确立 AI 衡量标准的评估:构建新颖的基准测试与数据集,在每个重要模型发布时对其进行评估,与前沿实验室合作评估世界尚未见到的未发布模型,并发布实验室、企业、媒体与政策制定者所依赖的分析。衡量成功的标准,是成为现代 AI 领域的世界级专家。

这是具有即时行业影响力的应用研究:周期短于学术研究,严谨性高于行业评论,受众也大于二者。岗位核心是构建:你绝大部分时间用于设计和交付评估,分析与行业协作围绕这一工作展开。

你将负责

  • 设计前沿评估:构思、构建并交付新颖的评估方法,推动 AI 能力衡量方式的进步,并持续领先于前沿模型的能力边界
  • 构建评估数据集与基础设施:构建支撑我们基准测试的数据集、harness 与评分系统,并针对污染抗性与前沿规模下的可重复性进行工程化设计
  • 评估每个重要模型:在前沿模型发布时运行我们的评估套件,并对行业引用的结果完整性负责
  • 发布有影响力的分析:产出塑造实验室、企业及更广泛行业对 AI 进展认知的报告、指数与数据可视化
  • 与前沿实验室合作评估未发布模型:对领先实验室的系统进行基准测试,包括未发布及新发布的模型,并直接与其研究团队合作;日常客户关系由商业团队负责,因此你的时间可专注于科学本身
  • 采用 AI 原生工作方式:拥抱 AI 原生工作流,利用前沿 AI 工具在快速变化的行业中提高效能,并保持我们在 AI 基准测试领域的竞争优势

我们期待你

我们要求具备 3 年以上相关专业经验,可来自产业或研究领域。你对 AI 怀有强烈兴趣,渴望成为这一领域的世界级专家,并具备扎实的分析和编程能力。

在达到上述门槛之外,我们从三类背景中招聘。你应当明确符合以下其中一种画像:

AI 与机器学习

相关背景包括:机器学习工程师、机器学习研究员、研究工程师、AI 工程师、前线部署工程师、技术产品经理,或在 AI 公司及 AI 团队担任类似职位。

你拥有现代 AI 系统的实践经验,并从技术层面理解模型的工作原理。你希望工作交付快于论文、影响力大于仪表盘:让整个行业都能看到的评估,周期以天计。

战略咨询

相关背景包括:Management Consultant、Associate、Engagement Manager、数据科学家,或在 McKinsey、BCG、Bain 等同类公司担任类似职位。我们尤其青睐拥有 QuantumBlack、AI by McKinsey、BCG X 等数据分析部门经验的候选人。

你知道如何拆解模糊问题、构建分析框架,并向高级利益相关者清晰传达结论。关键区别在于:对 AI 有真正的技术兴趣并具备编程能力。你关注模型发布,对技术的发展方向有自己的判断,并希望比咨询工作所允许的更加贴近主题本身。

技术产品管理

相关背景包括:创始工程师、产品经理、技术联合创始人、产品负责人,或早期 AI 公司的通才职位。

你曾在快速变化的环境中构建并交付 AI 产品,同时横跨研究、工程、产品和商业工作。你希望职责广泛本身就是工作的核心,而不是早期加入小公司的附带结果。

针对以上三类画像,我们都要求:

  • 出色的分析与批判性思维能力
  • 熟练掌握 Python 和数据分析
  • 对前沿 AI 具有真实、可证明的兴趣和了解。我们需要的是对 AI 发展方向有充分依据的见解,而不仅仅是会使用 AI 工具的人

为什么选择 Artificial Analysis?

  • 影响 AI 的构建方式:领先的 AI 实验室会追踪我们的基准测试,并以此指导开发重点。你的工作将直接影响 AI 的发展方向。
  • 成为世界级 AI 专家:每当重要模型发布时,你都会从各项主要能力维度对其进行评估。很少有职位能让你如此广泛地接触前沿 AI。
  • 与 AI 领域最重要的参与者合作:你将作为值得信赖的独立声音,与领先 AI 实验室和大型企业的团队建立并管理合作关系。
  • 在关键时刻加入:我们是一支 40 多人的团队,有望在年底前将规模翻倍,并获得了 AI 领域人脉最广泛的一批投资者支持。现在加入的人将在我们扩张过程中塑造产品、团队和战略。
  • 具有竞争力的薪酬,包括股权

对这个职位感兴趣?

请发送你的申请,我们会尽快与你联系。