AI評価サイエンティスト

Geniee

GenAI

AI

ML

研究職

この求人について

企業向けAIエージェント群(AGENT/CHAT/SPEECH)を拡大するジーニーのグループ会社JAPAN AIが、AI出力の品質・安全性・信頼性を科学的に評価する専門組織を新設し、そのリードとなるAI評価サイエンティストを募集しています。単にテストする人ではなく、機械学習・統計学・計量心理学の手法で「何をもって良いAIとするか」を定義し測定する役割です。

評価基盤の設計・構築・運用を担い、LLM-as-Judgeの校正や報酬モデリング、ベンチマーク設計と妥当性検証といった評価指標の研究、CI/CDに組み込む自動評価パイプラインと品質ゲート、マルチターンやツール利用に対応した評価ハーネス、自動レッドチーミングとポリシー準拠の検証、ハルシネーション検出、回帰テスト、統計的な実験設計と品質レポートを行います。関連分野の修士以上または同等の実務経験、MLエンジニアやデータサイエンティストなどの実務3年以上、LLM評価の深い知識、Pythonでの評価パイプライン構築経験が必要です。

これは企業の公式求人情報をもとにAIで作成した要約です。情報が不完全、古い、または誤っている可能性があります。応募前に必ず公式の求人情報ですべての内容をご確認ください。