年収800万円以上 品質コンサルタント・QAマネージャーの求人・転職情報

JAPAN AI株式会社

ミッション "AI の出力品質を科学する — 評価手法の研究・開発で、エージェントの信頼性を証明する" LLM / AIエージェントの出力品質を、機械学習・統計学・計量心理学の手法で定量的に評価・改善します。本ポジションは「テストする人」ではなく、 「何をもって良いAIとするかを定義し、測定する科学者」 です。 期待する役割について AI Evaluation Scientist として、AI エージェントの品質評価基盤の設計・構築・運用をリードしていただきます。 ●評価メトリクスの研究開発 — LLM-as-Judge の校正、報酬モデリング、ベンチマーク設計を通じて「何をもって品質とするか」を科学的に定義します ●自動評価パイプラインの設計・構築 — 研究成果を本番 CI/CD に組み込み、スケーラブルな品質ゲートを実現します ●レッドチーミング・安全性検証 — adversarial testing の自動化、ポリシー準拠検証フレームワークを構築します ●統計的実験計画に基づく品質改善 — A/B テスト・有意差検定でプロンプト戦略やモデル変更の効果を定量的に検証します ●評価シグナルの研究・開発チームへのフィードバック — モデル改善の複利ループを構築します 約 200 社が本番利用するプロダクトの品質を「科学する」アプローチで担保します 業務内容 AI Evaluation Scientistとして、 AIエージェントの評価基盤 (Evaluation Infrastructure) の設計・構築・運用をリードしていただきます。 ●評価メトリクスの研究開発 ・LLM-as-Judge の校正手法の研究・実装 (rubric 設計、バイアス検出、proper scoring rules) ・評価ベンチマークの設計・構築・妥当性検証 (construct validity、contamination detection) ・報酬モデリング / preference learning の評価への応用研究 ・評価メトリクスの選定・設計 (win rate、task success、factuality、harm detection) ・評価セット (合成データ + 実ログ) の設計・構築・メンテナンス ●自動評価パイプラインの設計・構築 ・スケーラブルな自動評価パイプラインの設計・実装 ・CI/CD への評価パイプライン組込みと品質ゲートの構築 ・エージェント評価ハーネスの設計 (マルチターン・ツール利用・ロングコンテキスト対応) ・評価パイプラインの再現性・信頼性の担保 ●安全性・品質検証 ・自動レッドチーミング (automated adversarial testing) の研究・実装 ・安全性 / ポリシー準拠の検証フレームワーク構築 ・ハルシネーション検出・校正手法の研究・実装 ・プロンプト / ツール回帰テストの設計・実行 ●統計分析・実験設計 ・統計的実験計画 (A/B テスト、有意差検定) の設計・分析 ・品質トレンドの可視化・回帰検出の自動化 ・品質レポート作成と改善提案 ・評価シグナルの研究・開発チームへのフィードバック 業務シナリオ ※以下は想定される業務シナリオの例です ●シナリオ1: LLM-as-Judge の校正と妥当性検証 新しい評価メトリクスとして LLM-as-Judge を導入する際、judge モデルの校正 (calibration) を実施します。人間評価との一致率を統計的に検証し、rubric 設計を反復改善します。construct validity を確認した上で、自動評価パイプラインに組み込み、評価コストを 80% 削減しながら人間評価と同等の信頼性を実現します。 ●シナリオ2: 新モデル導入時の品質ゲート LLMプロバイダーが新モデルをリリースした際、既存のベンチマークスイートで回帰テストを実行し、factualityスコアが3%低下していることを検出します。原因を分析し、プロンプト調整で品質を維持したまま新モデルへの移行を完了します。 ●シナリオ3: 自動レッドチーミングによる安全性検証 金融機関向けにJAPAN AI AGENTを導入する際、自動レッドチーミングパイプラインを構築します。adversarial promptの自動生成・分類器による脆弱性検出を実装し、業界固有のリスクシナリオ(機密情報漏洩、不適切な金融アドバイス等)を網羅的にテストします。ポリシー準拠率99%以上を達成します。 ●従事すべき業務の変更の範囲 会社の定める業務 成果責任 (KR/メトリクス) ●評価カバレッジ率(テストケース網羅率) ●回帰検出率(リリース前の品質劣化検出率 ≥ 95%) ●評価パイプライン実行時間(CI/CD内で完了) ●LLM-as-Judge と人間評価の一致率 ●False Positive / Negative 率 ●安全性インシデント発生率(リリース後) チーム体制 約120名が開発組織に在籍しています。 AI Evaluation Scientistは品質保証の専門チームとして、以下のチームと密接に連携します: ●密接に連携する役割: ・Agentic Product Engineer — エージェント機能開発 ・Research Engineer — 研究開発・モデル改善 ・Agent Harness Engineer / Software Engineer (AI Platform) — AI 実行基盤開発 ・Product Manager — プロダクト設計・品質要件定義 開発環境 ●言語 : Python (評価パイプライン・分析), TypeScript / React / Next.js (フロントエンド部) / NX ●評価 / QA : pytest, LangSmith, Weights & Biases, custom eval frameworks ●データ : BigQuery, Spark, Pandas ●インフラ : GCP (コンテナ / K8s), Docker, Terraform ●CI/CD : GitHub Actions ●ツール : Slack, Confluence, Linear, Google Workspace, GitHub, Notion ●AI 開発支援 : Claude Code MAX Plan, Cursor, ChatGPT, Devin ●作業環境 : Mac (Apple Silicon), デュアルモニタ対応

株式会社レオパレス21

商品開発部門のスペシャリストとして、0⇒1を生み出すための企画工程を組める方を募集いたします。 次世代商品の企画提案、開発、詳細設計、性能・施工検証、品質管理などの商品開発業務全般に加え、スタッフに対してアドバイスを行っていただき、共に社会インフラを担う賃貸住宅を開発いただきます。 変更の範囲:会社の定める業務

株式会社日立製作所

職務概要 データ・AIを活用したデジタルサービス事業(DX事業、特にHMAX事業)において、プロジェクトの停滞や品質問題、重大な障害の未然防止を目的に、品質課題の解決施策をリードします。本ポジションでは、デジタル領域における品質保証の知見やツールを活用しながら、プロジェクトで活用する品質保証プロセスの設計・改善を主導いただきます。 ・HMAX事業におけるプロジェクトの横断的な把握、および品質課題の抽出・解決策の検討 ・関係部署と連携した品質改善活動の推進、および勉強会・ワークショップの企画運営 ・デジタルソリューションの品質保証業務におけるAIエージェントの導入および活用促進 ・品質保証統括部門(本社QA)と連携したナレッジ共有および全社展開の推進 ・グローバルプロジェクトや海外拠点での品質保証活動における課題抽出および改善施策の実行 職務詳細 2026年度は新規領域拡大に向けて、既存の活動に加え、HMAXタスクフォース(社内横断のプロジェクトチーム)を立ち上げています。本タスクフォースには、各業界を担当する品質保証部門も参画しており、実際のプロジェクト遂行の中で発生する課題を横断的に収集しています。本ポジションでは、これらの課題に対し、解決策の検討や必要な調査を行い、最適な品質保証のノウハウやナレッジとして体系化し、他部門へ展開していく役割を担います。また、関係部署と連携した勉強会やワークショップの企画・運営を通じて、組織全体の品質向上を支援します。 さらに、本社QA、グローバル部門、企画部門、システムエンジニア部門と連携し、HMAXの最新動向を踏まえながら、AIやデータ、部門横断の連携を活用した「顧客価値につながる品質」を実現する新たな品質保証モデルの検討・構築を行います。 加えて、生成AIを活用した品質保証業務の高度化・効率化にも取り組みます。従来の品質保証業務を生成AIにより効率化するだけでなく、新たな価値創出につながる活用方法を検討し、その成果を全社へ展開していきます。 携わる事業・ビジネス・サービス・製品など 新領域のデジタルサービス事業であるHMAXについて社外HPに公開中 https://www.hitachi.co.jp/products/it/lumada/hmax/index.html 配属組織名 デジタルシステム&サービス統括本部 品質保証統括本部　デジタルサービス品質保証部 配属組織について(概要・ミッション) デジタルサービス品質保証部(デジQA)は、日立グループ全体およびグローバルで連携する品質保証体制(One QA)の中核として、デジタルサービスの品質確保をリードする組織です。顧客体験(CX)の向上に直結する品質づくりを担い、品質保証統括本部の直轄部門として活動しています。 本組織のミッションは、日立グループ全体での連携(One Hitachi)やHMAX事業(*1)における品質保証活動を高度化し、AIエージェントの活用による品質保証プロセスの変革や、顧客価値を測る品質指標(顧客価値品質指標)の策定・改善、ならびにフィードバックループの確立を推進しています。また、業界ごとに製品・サービスの品質を担う品質保証部門や、システムエンジニア/開発部門に対して、組織横断で支援を行っています。さらに、本社QAと連携し、品質確保の事例やノウハウの共有を推進するとともに、各ビジネスユニット(BU)が展開するLumada事業の品質保証活動を支援しています。 これらの活動を通じて、デジQAはデジタルシステム&サービス(DSS)セクターにとどまらず、日立グループ全体の品質向上と社会価値創出に貢献しています。 (*1)HMAXとは:AIを活用して社会インフラの高度化を実現する次世代ソリューション群。フィジカル(現場)とデジタル双方のデータを活用し、エネルギー・交通・産業などの分野における課題解決を支援します。

株式会社日立製作所

職務概要 品質保証を行う上で、プロジェクトのプロセスとプロダクトの両面に対して、SE部門とは独立した部門として客観的な品質の「測定」作業を行い結果を基に品質状況の分析・判定をします。 (1)ITシステム・ソフトウェア自体の品質測定テスト (2)開発プロセスの点検・監査 (3)設計内容に基づく品質分析・評価の実施 (4)リスクポイントに対する解決提案 改善状況のフォローアップを行い、確実なプロセス改善・是正を確認します。 職務詳細 ソフトウェア設計・開発・品質管理に関する知見・知識を活用し、顧客の要求によって左右される開発プロセス上の品質課題・品質リスクを洗い出して対応策を検討、提案することがミッションとなります。 上流工程から下流工程、本番稼働における品質確保に関する業務を行います。 　・プロジェクトの品質確保施策の遂行 　・設計/製造/テストの各工程の品質検査、品質分析、改善事項の提示 　・システム稼働に向けた検査合否判定 　・稼働状況の監視、品質状況の監視 配属組織名 デジタルシステム&サービス統括本部 品質保証統括本部　産業システム品質保証本部　産業第一品質保証部 配属組織について(概要・ミッション) 私たちの職場は、産業分野のIT・OT・プロダクトをシームレスに組み合わせた企業向けソリューション提供を担っている事業の品質保証を担当する部門です。 この事業は、ITの最新のテクノロジーに興味を持つ技術者にとって魅力的な環境です。IoT、AI、クラウドサービスなど、先進的な技術を採用してお客様へソリューションを提供しています。 自動化・ロボット化した生産ライン・自動化倉庫構築を含めた効率的なサプライチェーン構築をIT・OT・プロダクトを効果的に組み合わせて実現、提供することに取り組み、IT/OTのサイバーセキュリティやデジタル免疫システムにも注力して、安全性も重視したシステムの構築に取り組んでいます。 私たちの職場では、これらの技術を活用して効率的で革新的なソリューションの品質確保・品質保証をすることで広く社会貢献に取り組んでいます。さらに、この事業を遂行する組織と私たち品質保証部は新しい技術のトレンドや将来の展望にも積極的に取り組んでおり、最新のテクノロジーに触れながら、自身のスキルを高めることができる環境が整っています。また、グローバルな環境での活躍の機会があり、国内外のプロジェクトに参加することで、さまざまな文化やバックグラウンドを持つ人々との協力も経験できます。私たちの職場は、技術者にとって成長と挑戦の場であり、将来のキャリアを築くことができます。 携わる事業・ビジネス・サービス・製品など 日立の強みを生かしたLumada活用ソリューションの提案・提供、さらに顧客要望に応える受託システム構築プロジェクトやITサービスの開発・提供事業を支える品質保証・品質管理業務に関わることになります。 主な対応案件例を以下に示します。 (1)製造系企業の生産管理システム、流通系企業の物流システムを始めとする、企業基幹システム構築 (2)航空や鉄道等の重要インフラに関わるシステム構築

株式会社日立製作所

【配属組織名】 デジタルシステム&サービス統括本部 社会システム品質保証本部/公共システム品質保証部 【配属組織について(概要・ミッション)】 公共システム品質保証部は、社会ビジネスユニット/公共システム事業部に対応する品質保証専門部門です。公共システム事業部は、官庁分野(国税、年金、外郭団体)、自治体分野(地方公共団体)、社会保障分野(番号制度)、社会インフラ(警察・消防・道路)など、社会を支える基盤事業を担っています。 当部門は、こうした事業におけるシステム開発・運用の品質を確保し、安定稼働を実現することで「品質の日立」ブランドを体現しています。約350名規模の組織で、若手からベテランまで幅広いメンバーが活躍。お客様先でのプロジェクト参画もあり、社会インフラや公共サービスの健全性を品質で支える重要な役割を担っています。 【職務概要】 品質保証部は、独立した立場で客観性を維持しながら、SE部門と協働し総合的な品質を作り込みます。品質とは、信頼性・正確性だけでなく、使いやすさや要求充足度、サポート品質まで含まれます。重大事故や品質コンプライアンス違反を防ぐため、引き合いから納品までの各工程を監視・指導し、最終的な合否判定や稼働状況の監視を主導します。 【職務詳細】 上流工程から下流工程、本番稼働における品質確保に関する業務 ・検査計画の立案と品質確保施策の遂行 ・設計/製造/テスト各工程の品質検査(実機テスト含む) ・品質分析・改善提案、稼働に向けた最終判定 ・稼働状況の監視、品質リスクの未然防止 ※品質保証未経験でも、業務を通じて理解を深められます。 【働く環境】 ・配属組織/チーム:10～20名のチーム ・働き方:在宅勤務と出社のハイブリッド(平均で週1～2回の出社) ・開発・検査の時期やプロジェクトの状況により出張あり。 ※上記内容は、募集開始時点の内容であり、入社後必要に応じて変更となる場合がございます。予めご了承ください。

株式会社日立製作所

職務概要 品質保証部の職務は、品質保証の責任を担う独立部門としての客観性を維持しながらお客様が満足する総合的な品質をSE部門と共同で作り込むことです。 総合的な品質とは製品の信頼性や正確性だけでなく、使い勝手やお客様要求の充足度、サポートサービスの品質等、多岐に渡ります。 重大事故未然防止・品質コンプライアンス違反防止に向けて、業務の取り纏め者として、SE部門に対して引き合い・提案から顧客引き渡しに至るまでの各業務の監視及び指導、最終的な合否判定、顧客引き渡し後の稼働状況の監視等に関する実務を主導します。 職務詳細 上流工程から下流工程、本番稼働における品質確保に関する業務 　・プロジェクトの検査計画の立案、および品質確保施策の遂行 　・設計/製造/テストの各工程の品質検査、品質分析、改善事項の提示 　・システム稼働に向けた検査合否判定 　・稼働状況の監視、社外事故を含む品質状況の監視 ※品質保証業務経験がなくても、業務を通して理解を深める形で問題ありません。 携わる事業・ビジネス・サービス・製品など 金融向けシステム開発・運用における、全般的な品質保証業務 ●具体的内容は 金融(銀行、ノンバンク、保険、証券、取引所)分野において、IT技術による日立が誇る高い品質レベルでシステムやソリューション、サービスを提供していく仕事です。 ・ITを駆使したシステム構築において高い品質を維持するためのプロセス維持活動を行う。 ・ソフトウェア開発からシステム基盤構築までのプロセス評価と改善を行う。 ・テスト実施を含む測定を実行することで、システム全体の品質を評価する。 ・評価結果と改善結果を分析し、最終的な品質保証を行う。 具体的内容は 金融(銀行、ノンバンク、保険、証券、取引所)分野において、IT技術による日立が誇る高い品質レベルでシステムやソリューション、サービスを提供していく仕事です。 ・ITを駆使したシステム構築において高い品質を維持するためのプロセス維持活動を行う。 ・ソフトウェア開発からシステム基盤構築までのプロセス評価と改善を行う。 ・テスト実施を含む測定を実行することで、システム全体の品質を評価する。 ・評価結果と改善結果を分析し、最終的な品質保証を行う。 配属組織名 デジタルシステム&サービス統括本部 品質保証統括本部　金融システム品質保証本部 配属組織について(概要・ミッション) 金融システム品質保証本部は、デジタルサービスビジネスユニット 金融第一システム事業部、金融第二システム事業部におけるITシステム・サービスの品質保証部門です。 上記事業部は、金融(銀行、ノンバンク、保険、証券、取引所)分野のミッションクリティカルな基幹系システムを構築・運用、新たな金融ソリューションを開発・提供しており、ミッションクリティカルな社会インフラを高度なIT/デジタルシステムを実現しています。弊本部は第3者として、その事業の品質管理・品質保証業務を通して品質確保と安定稼働の実現を担っています。 弊本部は約270名(グループ会社/協力会社員含め)による若手からベテランまで幅広い年齢層の部署です。 顧客先でのシステム開発プロジェクトにも参画し、ミッションクリティカルな社会インフラを支えるシステム・サービスの健全性を品質で支え、安心・安全をお客様とエンドユーザに提供するために活動しています。

株式会社日立製作所

職務概要 複数プロジェクトを横断的に品質管理する専門チームのマネジメントを担っていただきます。 職務詳細 ●下記作業を行う10名程度のチームのマネジメント。主に進捗管理、アサイン管理、顧客折衝対応等。 ・品質管理(品質評価・障害分析) ・工程管理(規定・プロセス確認) 基本的に、システム開発における品質担保をミッションに、どのような品質基準でレビューを行うべきか、品質工程の仕様検討や、レビューをご対応いただき、ベンダー・チームメンバーへの指示だし等を行っていただきます。 携わる事業・ビジネス・サービス・製品など 大手ネット銀行におけるシステム開発プロジェクトの品質管理支援 仮想化技術やクラウド、AIをはじめとする最新技術の利活用も積極的に取り組んでいる環境の中、品質確保の顧客支援を行う。 配属組織名 デジタルサービスビジネスユニット(金融システム) 金融第一システム事業部　第三本部　第四グループ 配属組織について(概要・ミッション) ●担当業界 大手ネット銀行 ●ミッション 開発速度が速く、多数のプロジェクトが輻輳するネット銀行の環境において、金融機関に求められる品質の確保に寄与し、社会インフラを支える。

株式会社ヤマシタ

※ご経験と志向性に応じて、以下の役割の中から適切な領域をお任せします。 ・品質戦略・QA計画の策定と推進 複数プロダクト(データ基盤PJ、原価管理システムPJ、生産管理システムPJ等)を横断的に見渡し、品質目標の設定からQA計画の策定までをリードします。プロジェクトの特性やリスクに応じて優先順位付けを行い、限られたリソースで最大の品質効果を生み出す戦略を立案・推進します。 ・品質プロセスの設計とレビュー体制の構築 開発の上流工程から品質観点でレビューに参加し、要件/基本設計/詳細設計の各フェーズでテスト観点を定義します。PdM/POや開発エンジニアと連携し、不具合の早期発見・早期解決ができる品質プロセスを構築します。 ・非機能品質(性能・信頼性・運用性)の保証 複数システム間のデータ連携部分において、障害発生時の復旧検証やデータ整合性の確認など、複雑なシナリオの設計・実行をリードします。特に、特定システムの障害時に他システムへの影響を最小化できるかどうかの検証が重要なミッションとなります。 ・テスト自動化による品質の安定化 自動化テストツール等を活用し、回帰テストの効率化と品質の安定化を推進します。CI/CD上での自動テスト実行環境を整備し、リリースサイクルの短縮と品質担保の両立を実現します。 ・外部パートナーとの連携によるQA体制の拡充 外部委託先との連携窓口として、テスト計画の立案、進行管理、成果物レビューを担当します。社内開発チームと外部パートナーの橋渡し役として、品質基準の統一と効率的なQA運用を実現します。 ・品質メトリクスの設計・可視化と改善サイクル運用 カバレッジ、欠陥密度、Lead?Time等の品質指標を設計し、ダッシュボードによる可視化を行います。データに基づいた改善提案を行い、継続的な品質向上サイクルを確立します。 【組織体制】 システム開発部には約20名が在籍しており、複数のプロダクトチームに分かれて開発を進めています。QAリードは各チームを横断的に支援しながら、PdM/POやエンジニアと密に連携いただきながら品質向上をお任せします。外部パートナーも活用しつつ、社内外のリソースを組み合わせたQA体制を構築していただきたいと考えています。 【組織体制】 ・E2E:Playwright/Cypress ・負荷テスト:k6 ・CI/CD:GitHub Actions ・コラボレーション:Notion、Issueトラッカー、各種ドキュメント基盤 ・AIエージェント:Claude Code、AWS DevOps Agent、その他オープンソースで提供されているQAエンジニア向けSub Agent 【ワークスタイル】 ・自ら動き、相手に働きかける、重要な活動を人任せにしない。(ハンズオンを最も大事にしています) ・社員のやりがいを尊重し、仲間と高め合う。(社員の仕事のやりがいを大事にしています) ・自分はフェアであろうとしているか?自分や他者を豊かにしているか?と問う(正しく生きる、豊かに生きる) 【業務内容の変更範囲】当社業務全般