技術スタッフ(推論)
Artificial Analysisについて
Artificial Analysisは、独立系AIベンチマーク企業のリーディングカンパニーです。AIラボ、エンジニア、企業がAIの能力を理解し、AI戦略に関する重要な意思決定を行えるよう支援しています。AIラボや企業からメディア、投資家、政策立案者まで、AIを理解するための信頼できる情報源として選ばれています。当社のベンチマークはAIの最先端を測るだけでなく、そのフロンティア自体を形づくっています。
当社のベンチマークと分析は数十万人のユーザーから信頼され、OpenAI、Google、Meta、NVIDIA、Anthropicなどの主要AIラボや、The Wall Street Journal、Bloomberg、Financial Times、The Economistなどの主要メディアにとって定番の情報源となっています。
当社は40人を超えるチームで、年末までに3倍の規模へ成長する見込みです。Nat Friedman(Github、Meta)、Daniel Gross(SSI)、Andrew Ng(Google Brain、DeepLearning.ai、Amazon)、Adam D'Angelo(Quora、Poe、OpenAI)、Clem Delangue(Hugging Face)をはじめとする業界リーダーから支援を受けています。
このポジションについて
言語モデル推論は、AIで最も変化の速い市場です。数十社のプロバイダーが存在し、料金と性能は絶えず変化し、数十億ドル規模の導入判断が独立したデータにかかっています。当社の推論ベンチマークは業界の基準点であり、その取り組みを推進する技術スタッフを募集します。
サーバーレス推論市場の対象範囲を担います。品質、速度、料金の観点からエンドポイントをベンチマークし、キャッシュ料金、エンドポイント精度、エージェント型性能などの新しい軸へ方法論を拡張します。また、当社の数値をもとにサービスを提供する推論プロバイダーやネオクラウドと直接協働します。
業務内容
- 推論市場をベンチマーク:フロンティアラボから専門プロバイダーまで、プロバイダーエコシステム全体のサーバーレスAPI推論について、性能と料金の対象範囲を担う
- 方法論を拡張:キャッシュ料金、エンドポイント精度、エージェント型性能を含む新たなベンチマーク軸を推進し、業界の導入方法を先取りする測定を実現する
- プロバイダーと連携:推論プロバイダーやネオクラウドと直接協働してエンドポイントをベンチマークし、方法論上の疑問を解消し、市場におけるサービング性能の測定方法を形づくる
- 市場を分析:スループットや最初のトークンまでの時間から価格性能フロンティアまで、業界が推論性能と経済性を理解するために使う分析を作成する
- プロダクト方針を推進:エンジニアや領域責任者とともに、推論ベンチマークプラットフォームのロードマップを形づくる
- AIネイティブになる:最先端のAIツールを活用するAIネイティブなワークフローを取り入れ、変化の速い業界で生産性を高め、AIベンチマークにおける競争優位性を維持する
求める人物像
推論市場を内側から理解している方を求めます。
想定する経歴:推論プロバイダーやネオクラウド(Together AI、Fireworks、Baseten、Cerebras、Novita、Parasail、DeepInfra、Modal、CoreWeave、Lambda、Nebius、Crusoeなど)でのエンジニアリング、プロダクト、Developer Relations、技術GTM職、または本番環境で大規模にモデルをサービングするチーム。
必須要件:
- 3年以上の実務経験。そのうち2年以上は、推論プロバイダー、ネオクラウド、本番環境でモデルをサービングするチームでの勤務、またはそれらとの密接な協働経験
- 優れた分析力と批判的思考力
- Pythonとデータ分析のスキル
- モデルサービングスタック(vLLM、SGLang、TensorRT-LLMなど)と、複数プロバイダーの推論APIを実際に扱った経験
- トークン毎秒、最初のトークンまでの時間、スループットと遅延のトレードオフ、トークン当たりのコストなど、推論性能指標と経済性への深い理解
- フロンティアAIへの真摯で明確な関心と知識。単にAIツールを使うだけでなく、AIがどこへ向かうかについて根拠ある見解を持つ方
Artificial Analysisで働く理由
- AI開発のあり方を形づくる:主要AIラボは当社のベンチマークを追跡し、開発優先順位の判断に活用しています。あなたの仕事がAIの進む方向に直接影響します。
- AIの世界的エキスパートになる:主要モデルがリリースされるたびに、主要な能力のすべてを評価します。これほど幅広くフロンティアAIに触れられる仕事はほとんどありません。
- AI業界の最重要プレイヤーと働く:信頼される独立した立場から、主要AIラボや大手企業のチームとの関係を担います。
- 決定的な成長期に加わる:当社は40人を超え、年末までに倍増する見込みで、AI業界で強いネットワークを持つ投資家から支援を受けています。今加わるメンバーが、事業拡大に伴うプロダクト、チーム、戦略を形づくります。
- 株式報酬を含む競争力のある待遇