Forward Deployed Engineer(メディア生成)
Artificial Analysisについて
Artificial Analysisは、独立系AIベンチマーク企業のリーディングカンパニーです。AIラボ、エンジニア、企業がAIの能力を理解し、AI戦略に関する重要な意思決定を行えるよう支援しています。AIラボや企業からメディア、投資家、政策立案者まで、AIを理解するための信頼できる情報源として選ばれています。当社のベンチマークはAIの最先端を測るだけでなく、そのフロンティア自体を形づくっています。
当社のベンチマークと分析は数十万人のユーザーから信頼され、OpenAI、Google、Meta、NVIDIA、Anthropicなどの主要AIラボや、The Wall Street Journal、Bloomberg、Financial Times、The Economistなどの主要メディアにとって定番の情報源となっています。
当社は40人を超えるチームで、年末までに3倍の規模へ成長する見込みです。Nat Friedman(Github、Meta)、Daniel Gross(SSI)、Andrew Ng(Google Brain、DeepLearning.ai、Amazon)、Adam D'Angelo(Quora、Poe、OpenAI)、Clem Delangue(Hugging Face)をはじめとする業界リーダーから支援を受けています。
このポジションについて
Artificial Analysisは主要な画像・動画生成モデルをベンチマークし、構造化された人間の選好評価に基づく独立した品質・性能比較をAI業界に提供しています。
メディア生成ベンチマークパイプラインをエンドツーエンドで担い、メディア生成モデルプロバイダーに対するArtificial Analysisの技術窓口となるForward Deployed Engineerを募集します。画像・動画評価を実行し、人間の選好調査を管理し、結果、方法論、問い合わせについてプロバイダーが頼る窓口となります。
プロセスを重視し、顧客と深く関わるポジションです。細部に注意を払い、Pythonを扱うことに慣れ、パイプラインを日々安定して運用することに誇りを持ちながら、世界で最も創造的なAI企業に対して当社のプラットフォームを代表できる方を求めます。
業務内容
- 標準化された評価プロトコルに従い、複数モデルで画像・動画出力を生成する
- 調査設計、参加者管理、品質管理を含む、人間の選好評価調査を設定・管理する
- 選好投票データを処理・分析し、ベンチマーク結果を作成する
- プロンプトの実行から結果の公開まで、パイプラインをエンドツーエンドで管理する
- メディア生成モデルプロバイダーの技術窓口となり、結果の共有、方法論の説明、問い合わせ対応を担う
- データ品質を監視し、異常を特定して、評価ラウンド間の一貫性を確保する
- プロセスと設定に関するドキュメントを維持する
- 画像・動画モデルの新しいリリースを常に把握する
求める人物像
必須要件:
- 顧客対応型の技術職(Solutions Engineering、Support Engineering、技術コンサルティングなど)で3年以上の経験。Stripe、Vercel、Cloudflare、Datadog、Palantir、Accentureまたは同等の企業での経験を想定
- 高いPythonスキルと、自分が書いたものではない複雑なコードベースを扱う力
- AIモデルAPI、理想的には画像・動画生成API(OpenAI、Google、Black Forest Labsなど)を実際に扱った経験
- 優れたデバッグ力。API、データパイプライン、コードをまたいで問題を追跡できること
- 技術的な概念を技術系ステークホルダーに明確に説明できる、優れた英語の文章・口頭コミュニケーション力
- 迅速かつ信頼できる対応力。顧客の問題に責任を持ち、最後まで対応できること
- 運用中心の反復的な業務に抵抗がなく、高い水準で運営することにやりがいを感じること
- 細部への高い注意力と、プレッシャー下での冷静さ
歓迎要件(必須ではありません):
- 研究調査、データ収集パイプライン、クラウドソーシングプラットフォームの管理経験
- 画像・動画生成モデル(Sora、Veo、Kling、Midjourney、FLUX、Runwayなど)の使用経験
- データ分析または研究オペレーションの経験
- 人間による評価方法論または選好ベースのランキングシステムに関する知識
- B2B SaaSまたは開発者向けツールの経験
Artificial Analysisで働く理由
- AI開発のあり方を形づくる:主要AIラボは当社のベンチマークを追跡し、開発優先順位の判断に活用しています。あなたの仕事がAIの進む方向に直接影響します。
- AIの世界的エキスパートになる:主要モデルがリリースされるたびに、主要な能力のすべてを評価します。これほど幅広くフロンティアAIに触れられる仕事はほとんどありません。
- AI業界の最重要プレイヤーと働く:信頼される独立した立場から、主要AIラボや大手企業のチームとの関係を担います。
- 決定的な成長期に加わる:当社は40人を超え、年末までに倍増する見込みで、AI業界で強いネットワークを持つ投資家から支援を受けています。今加わるメンバーが、事業拡大に伴うプロダクト、チーム、戦略を形づくります。
- 株式報酬を含む競争力のある待遇