募集要項
- 募集背景
- 事業拡大に伴う増員となります。
- 仕事内容
-
AI Evaluation Scientistとして、AIエージェント品質評価基盤の設計・構築・運用をリードしていただきます。
【具体的には】
評価指標の研究開発
自動評価パイプラインの設計・構築
レッドチーミング・安全性検証
統計的実験設計による品質改善
評価結果の研究開発チームへのフィードバック
実運用品質の担保
- 応募資格
-
- 必須
-
・LLM / 生成AI評価の深い知識
・統計・実験設計知識
・PythonによるML/評価パイプライン構築経験
・PyTorch / JAX / TensorFlow実務経験
・評価指標設計経験
【歓迎】
・NeurIPS / ICML / ICLR / ACL / EMNLP等の論文実績
・RLHF / DPO経験
・LLM-as-Judgeキャリブレーション経験
・Responsible AI / AI Safety経験
・Benchmark妥当性検証
・マルチエージェント評価経験
- 雇用形態
- 正社員
- 勤務地
- 東京都
- 年収・給与
- 800~1600万円
- 待遇・福利厚生
- 通勤手当
- 休日休暇
- 慶弔休暇 年末年始 夏期休暇 有給休暇
