その他職種条件を変える閉じる
仕事内容その他職種
生成AI・AIエージェントを安全に業務利用するための品質基盤（EvalOps）を構築し、AIアプリケーションの品質評価・改善の仕組みを確立するポジションです。QA領域の枠組みづくりから、評価指標の設計、テスト自動化、品質改善提案まで幅広く担います。
ミッション
- 生成AI・AIエージェントを安全・安心に業務利用できる品質基盤（EvalOps）を構築し、AIアプリケーションの品質を継続的に評価・改善できる仕組みを確立します。
主な業務
- AIを含む自社サービスの品質向上に向けた、テスト自動化の推進や評価プロセスの改革など、QA（品質保証）領域の枠組みづくりから実務までを牽引していただきます。
- EvalOps基盤の設計・開発・運用
- AIアプリケーション（Agent／RAG／LLM）の品質評価
- 評価データセット（Golden Dataset）の整備
- テスト自動化の仕組み構築
- 品質評価結果の分析・可視化
- 評価結果を基にした改善サイクルの運用
- AI品質保証プロセスの標準化・ルール策定
具体的な業務
- AI領域における新たな品質基準の策定や、開発プロセスと連動した「品質の作り込み」に加え、既存の評価プロセスの改革やテスト自動化など、QAの枠組みづくりから広く携わっていただきます。
- AIアプリケーションの評価指標（正確性・有用性・安全性・応答速度・コストなど）の設計
- 自動評価・人手評価を組み合わせた評価プロセスの構築
- Golden Datasetの作成・保守
- プロンプト改善、RAG改善、モデル設定変更の効果測定
- 評価ダッシュボード・レポートの作成
- AI品質保証ガイドラインの整備
- AI開発チームへの品質改善提案
- AIプロダクトのリリース判定レビュー
仕事の魅力
- AI品質保証という新しい領域をゼロから創る：国内でもまだ事例の少ない「EvalOps」の立ち上げに携われます。
- 単なるテスト担当ではない：品質評価だけではなく、評価基盤を設計する／評価指標を決める／AIを改善するまで一気通貫で携われます。
- 数百人規模の業務変革を支える：EvalOps基盤はAI品質保証の共通基盤となり、多くのAIプロダクトに横断的な価値を提供します。
- AI品質保証の第一人者を目指せる：今後市場価値が高まるAI Testing／LLM Evaluation／EvalOps／AIガバナンスの実務経験を積むことができます。
募集要項最終確認 9/12
- 雇用形態
- 正社員
- 想定年収
- 679.1〜940.7万円/年
- 勤務地
- 東京都港区
- 働き方
- ハイブリッド勤務
- 年間休日
- 非公開
- 職種
- その他職種
- 経験年数
- 不問
- 掲載日
- 9/11
- 最終確認
- 9/12
応募資格（必須）
- 大規模プロジェクトシステム開発における品質保証（QA）の経験
- システム開発経験や、開発プロセスの中でテスト設計・レビューを主導した経験
- テスト自動化の環境構築の経験
歓迎する経験
- AI・生成AI・LLMを利用した開発経験
- RAG構築経験
- AI品質評価の経験
- テスト自動化経験
- CI／CD環境構築経験
- DevOps／MLOps経験
- Datadog、Grafanaなどの可視化経験
- クラウド（Azure／AWS／GCP）経験
- JSTQB認定資格の保持
求めるスキル・経験
この求人はソフトバンク株式会社の採用ページの掲載内容をもとに構成しています。応募条件の最新情報は募集元をご確認ください。
東京都のその他職種の求人7,951件
東京都のその他職種の求人をすべて見る（7,951件）募集元の採用ページから応募できます
応募はソフトバンク株式会社の採用ページで受け付けています。このページは採用ページの掲載内容をもとに構成しているため、最新の応募条件は募集元でご確認ください。
この求人と近い条件で探す数字はリンク先ページの掲載件数
この職種で探す
この勤務地で探す
働き方・年収で探す
- 年収600万以上14,421
- 年収700万以上7,883
- Web面接可8,578
- 完全週休2日31,781
- 年間休日120日以上30,169