募集中のポジション一覧
技術スタッフ(プロダクト含む)フルタイムサンフランシスコ(オンサイト)

技術スタッフ(応用AI研究)

Artificial Analysisについて

Artificial Analysisは、独立系AIベンチマーク企業のリーディングカンパニーです。AIラボ、エンジニア、企業がAIの能力を理解し、AI戦略に関する重要な意思決定を行えるよう支援しています。AIラボや企業からメディア、投資家、政策立案者まで、AIを理解するための信頼できる情報源として選ばれています。当社のベンチマークはAIの最先端を測るだけでなく、そのフロンティア自体を形づくっています。

当社のベンチマークと分析は数十万人のユーザーから信頼され、OpenAI、Google、Meta、NVIDIA、Anthropicなどの主要AIラボや、The Wall Street Journal、Bloomberg、Financial Times、The Economistなどの主要メディアにとって定番の情報源となっています。

当社は40人を超えるチームで、年末までに3倍の規模へ成長する見込みです。Nat Friedman(Github、Meta)、Daniel Gross(SSI)、Andrew Ng(Google Brain、DeepLearning.ai、Amazon)、Adam D'Angelo(Quora、Poe、OpenAI)、Clem Delangue(Hugging Face)をはじめとする業界リーダーから支援を受けています。

このポジションについて

当社の評価が、世界におけるAIの測り方を決めます。フロンティアラボがモデルをリリースすると、業界は当社のベンチマークを通じて、そのモデルが実際に何をできるかを知ります。ラボ自身も当社の結果を次の開発方針に活用しています。このポジションは測定の最前線に立つ仕事です。最先端をただ見守るのではなく、何が最先端かをあなたの仕事が定義します。

AIの測定基準となる評価を設計する技術スタッフ(応用AI研究)を募集しています。新しいベンチマークとデータセットを構築し、主要モデルのリリースごとに評価し、世界への公開前からフロンティアラボとリリース前モデルに取り組み、ラボ、企業、メディア、政策立案者が頼る分析を公開します。成功の基準は、現代のAIにおける世界的エキスパートになることです。

業界に即座の影響をもたらす応用研究です。学術研究より短いサイクル、業界解説より高い厳密性、そしてその双方より大きな読者層があります。中心となるのは構築です。時間の大半を評価の設計と提供に充て、その周囲に分析や業界との協働があります。

業務内容

  • フロンティア評価の設計:AI能力の測定方法を前進させ、フロンティアモデルの能力を先取りする新しい評価方法論を考案・構築・提供する
  • 評価データセットとインフラの構築:汚染耐性とフロンティア規模での再現性を備えた、ベンチマークを支えるデータセット、ハーネス、採点システムを構築する
  • 主要モデルをすべて評価:フロンティアモデルのリリースごとに評価スイートを実行し、業界に引用される結果の完全性に責任を持つ
  • 影響力のある分析を公開:ラボ、企業、業界全体によるAIの進歩への理解を形づくるレポート、指数、データ可視化を作成する
  • フロンティアラボとリリース前モデルに取り組む:リリース前および新規リリースのモデルを含む主要ラボのシステムを、その研究チームと直接協働してベンチマークする。日常的な顧客対応はコマーシャルチームが担うため、科学的な仕事に集中できる
  • AIネイティブになる:最先端のAIツールを活用するAIネイティブなワークフローを取り入れ、変化の速い業界で生産性を高め、AIベンチマークにおける競争優位性を維持する

求める人物像

業界または研究分野で3年以上の関連実務経験が必要です。AIへの強い関心と、この分野の世界的エキスパートになりたいという意欲があり、それを支える優れた分析力とコーディング力を備えた方を求めます。

この基準に加え、主に次の3つの経歴から採用しています。いずれかに明確に当てはまる方を求めます。

AIと機械学習

想定する経歴:AI企業やAIに注力するチームでのML Engineer、ML Researcher、Research Engineer、AI Engineer、Forward Deployed Engineer、Technical PMなど。

現代のAIシステムを扱った実務経験があり、モデルの仕組みを技術レベルで理解している方。論文より速く世に出て、ダッシュボード以上の影響を持つ仕事、つまり業界全体が目にする評価を数日単位のサイクルで届けたい方を求めます。

戦略コンサルティング

想定する経歴:McKinsey、BCG、Bainまたは同等の企業でのManagement Consultant、Associate、Engagement Manager、Data Scientistなど。QuantumBlack、AI by McKinsey、BCG Xなどのデータ分析部門での経験がある方を特に歓迎します。

曖昧な問題を構造化し、分析フレームワークを構築し、シニアステークホルダーに結果を伝える方法を理解している方。最大の違いは、AIへの真摯な技術的関心とコーディング力です。モデルのリリースを追い、技術の方向性について自身の見解を持ち、コンサルティングの枠を超えて対象領域に深く関わりたい方を求めます。

テクニカルプロダクトマネジメント

想定する経歴:初期段階のAI企業でのFounding Engineer、Product Manager、Technical Co-founder、Head of Product、またはジェネラリスト職。

変化の速い環境で、研究、エンジニアリング、プロダクト、コマーシャルの各領域を同時に担いながらAIプロダクトを開発・提供してきた方。小規模企業の初期メンバーだから結果的に幅広く働くのではなく、その幅広さ自体が仕事となるポジションを求めている方に適しています。

3つのプロフィールすべてに共通する必須要件:

  • 優れた分析力と批判的思考力
  • Pythonとデータ分析のスキル
  • フロンティアAIへの真摯で明確な関心と知識。単にAIツールを使うだけでなく、AIがどこへ向かうかについて根拠ある見解を持つ方

Artificial Analysisで働く理由

  • AI開発のあり方を形づくる:主要AIラボは当社のベンチマークを追跡し、開発優先順位の判断に活用しています。あなたの仕事がAIの進む方向に直接影響します。
  • AIの世界的エキスパートになる:主要モデルがリリースされるたびに、主要な能力のすべてを評価します。これほど幅広くフロンティアAIに触れられる仕事はほとんどありません。
  • AI業界の最重要プレイヤーと働く:信頼される独立した立場から、主要AIラボや大手企業のチームとの関係を担います。
  • 決定的な成長期に加わる:当社は40人を超え、年末までに倍増する見込みで、AI業界で強いネットワークを持つ投資家から支援を受けています。今加わるメンバーが、事業拡大に伴うプロダクト、チーム、戦略を形づくります。
  • 株式報酬を含む競争力のある待遇

このポジションに興味がありますか?

応募書類をお送りください。追ってご連絡します。