QAエンジニア・テストエンジニア（テスター）(Google Cloud Platform(GCP))の求人・転職情報

●職務内容 大手法人向け統合人事システム「COMPANY」の製品品質の改善を行います。 外部・内部品質の向上の為、自動化を推進します。 ●具体的な業務内容 ・自動テストの推進・運用・改善 └ユニット、E2E、パフォーマンスなど ・自動テスト環境の構築・運用 ・コード品質改善ツールの推進・運用・改善 └静的解析(SonarQube)、Linter、フォーマッターなど ・テスト設計、マニュアル作成支援 ・品質改善計画の策定・実行 ・開発、QA、DevOpsチームとの連携 ●SETとQAの違い どちらもソフトウェアの品質を向上させる役割を担う職種ですが、 SETはソフトウェアテストの自動化を担当するエンジニアであり、 QAはソフトウェアの品質管理全般を担当する職種です。 ●技術スタック サーバーサイド: Java, TypeScript, Kotlin, COBOL フロントエンド: 開発言語:HTML, CSS, JavaScript, TypeScript ライブラリ:jQuery, Vue.js, React, LESS データストア: Oracle Database, PostgreSQL, Amazon DynamoDB ミドルウェア: Nginx, Apache Tomcat, IBM WebSphere クラウド: AWS, GCP, Azure, OCI CI/CD: Jenkins, AWS CodeBuild, Gradle, Maven, Ant モニタリング: CloudWatch, Zabbix, AppDynamics, Datadog デザインツール: Figma ソースコード管理: GitHub, AWS CodeCommit, Gitlab, Subversion タスク管理: GitHub issues, GitLab issues, Redmine, Trac 開発ツール: Visual Studio Code, Eclipse コミュニケーション: Slack, Google Workspace 【入社後のフォロー体制】 ・1か月程度の教育(インプット)期間の後、1～3か月のOJTでの軽微な修正や開発を行い、3～6か月程度でひとり立ちしていただきます。 ・運用マニュアルや業務wiki、先輩などの有識者へ気軽に聞ける環境が整っていますので、 ご経験が浅い方でも安心して業務を遂行できます。 ・入社直後は経験豊富なメンターの指導を受けながら開発・運用に従事いただき、 徐々に企画・設計などの裁量の大きい仕事へとチャレンジしていただくことが可能です。 【職種について】 変更の範囲:入社後は本職種に従事いただきます。その後、ご本人の適性等により当社業務全般に変更の可能性があります。

【職務内容】 大手法人向け統合人事システム「COMPANY」の製品品質の改善を行います。 外部・内部品質の向上の為、自動化を推進します。 【具体的な業務内容】 ・自動テストの推進・運用・改善 └ユニット、E2E、パフォーマンスなど ・自動テスト環境の構築・運用 ・コード品質改善ツールの推進・運用・改善 └静的解析(SonarQube)、Linter、フォーマッターなど ・テスト設計、マニュアル作成支援 ・品質改善計画の策定・実行 ・開発、QA、DevOpsチームとの連携 【SETとQAの違い】 どちらもソフトウェアの品質を向上させる役割を担う職種ですが、 SETはソフトウェアテストの自動化を担当するエンジニアであり、 QAはソフトウェアの品質管理全般を担当する職種です。 【キャリアパス】 ご経験・適性に応じて担当業務を決めます。 半年後には主担当へ、2年後にはリーダーへのステップアップを期待します。 手挙げ制度や年1回の全社公募制度もあるため、 ご希望に応じて幅広いキャリアパスの提供が可能です。 <事例> ・エンジニアリーダー￫マネージャー(プロダクト責任者)またはスペシャリスト ※年齢での評価は行っていないため、入社後数年でリーダー￫5年を目安に マネージャーを目指していただける環境です。 ・プロダクト開発、テックリード、SREなど他職種への異動 ・導入コンサル、採用人事などエンジニア以外の組織へ異動 ●技術スタック サーバーサイド: Java, TypeScript, Kotlin, COBOL フロントエンド: 開発言語:HTML, CSS, JavaScript, TypeScript ライブラリ:jQuery, Vue.js, React, LESS データストア: Oracle Database, PostgreSQL, Amazon DynamoDB ミドルウェア: Nginx, Apache Tomcat, IBM WebSphere クラウド: AWS, GCP, Azure, OCI CI/CD: Jenkins, AWS CodeBuild, Gradle, Maven, Ant モニタリング: CloudWatch, Zabbix, AppDynamics, Datadog デザインツール: Figma ソースコード管理: GitHub, AWS CodeCommit, Gitlab, Subversion タスク管理: GitHub issues, GitLab issues, Redmine, Trac 開発ツール: Visual Studio Code, Eclipse コミュニケーション: Slack, Google Workspace 【入社後のフォロー体制】 ・1か月程度の教育(インプット)期間の後、1～3か月のOJTでの軽微な修正や開発を行い、3～6か月程度でひとり立ちしていただきます。 ・運用マニュアルや業務wiki、先輩などの有識者へ気軽に聞ける環境が整っていますので、 ご経験が浅い方でも安心して業務を遂行できます。 ・入社直後は経験豊富なメンターの指導を受けながら開発・運用に従事いただき、 徐々に企画・設計などの裁量の大きい仕事へとチャレンジしていただくことが可能です。 【職種について】 変更の範囲:入社後は本職種に従事いただきます。 その後、ご本人の適性等により当社業務全般に変更の可能性があります。

BucketeerはABEMA発のフィーチャーフラグマネジメント・ABテストシステムで、ABEMAの開発高速化、仮説検証に大きく貢献してきました。 この開発体験と文化をメディア管轄およびCAグループに広めるために組織的に開発生産性向上のスキーム作りや文化醸成にコミットする全社組織Developer Productivity室へ移管を行い、トランクベース開発の文化やフィーチャーフラグ・ABテストといったプラクティスのBucketeerでの実践方法を広くアウトプットしてきました。今後もBucketeerを通じて、フィーチャーフラグ・A/Bテスト・トランクベース開発のベストプラクティスを社内に浸透させていきます。 また、Bucketeerは2022年9月にOSSとして公開されました。OSS化で市場認知を広げ、多くのフィードバックを獲得してさらなるプロダクト強化に繋げたいとか考えています。フィーチャーフラグ・A/Bテスト領域ではまだこれといったデファクトなプロダクトは存在しておらず、その開発手法も広く定着しているとは言い難いところがあります。それ故に、この領域でデファクトを狙えるチャンスが訪れているとも言えます。 今後は、Bucketeerを通してこの開発文化を当たり前に浸透させていくこと、社内SaaSとOSS開発を両立する難しいチャレンジを引き続き行っていきます。このチャンレンジを担う開発メンバーを募集します。 会社概要 1998年の創業以来インターネットを軸に事業を展開し、スマートフォン向けに多数のコミュニティサービスやゲームを提供しているサイバーエージェント。 ブログを中心とした「Ameba」をリリース。 その後、新しい未来のテレビ「ABEMA」を開局し音楽ストリーミングサービス「AWA」や、LDHのコンテンツを楽しめる「CL」、競輪を“若者が楽しめるエンタメ“にすることを目指した「WINTICKET」などインターネット産業の変化にあわせて様々なメディアサービスを提供しています。

●任せる業務の概要 Hondaのコネクテッドサービスおよびデジタルサービスにおける品質保証領域の中核として、部門全体の品質戦略・プロセス・基準の策定および推進を担っていただきます。 ※専門性や適性、会社ニーズなどを踏まえ、会社が定める業務への配置転換を命じる場合があります。 ●具体的な想定業務 ・部門全体における品質戦略・品質基準の策定および展開 ・開発プロセスにおける品質保証プロセスの設計・標準化 ・テスト戦略および品質メトリクス(KPI/KGI)の設計・運用 ・品質向上に向けた仕組み化(テスト自動化・ツール導入・再利用化)の推進 ・各プロダクトに対する品質レビューおよび課題抽出・改善提案 ●使用ツール/開発言語など 量産環境:AWS、Google Cloud 使用ツール:Jira/Confluence、Teams、Slack、各種AI、CICD、VSCode ※業務上の事情により国内外の事業所(子会社及び関連会社を含む)への異動、または出向・派遣を命じる場合があります。

【このポジションの役割】 本ポジションでは、AI を活用した品質保証プロセスの設計と改善を担います。 単にテストを実行するのではなく、 ・品質リスクの分析 ・テスト戦略の設計 ・テスト自動化 ・AI を活用した品質改善 などを通して、プロダクトの品質を継続的に向上させます。 QA は開発プロセスの最後の工程ではなく、品質を作るエンジニアリング領域であると考えています。 【主な業務】 ・AI を活用したテスト設計・テスト生成 ・E2E / Integration / Unit テストの自動化 ・CI/CD パイプラインへのテスト統合 ・品質メトリクスの設計・分析 ・品質リスク分析とテスト戦略設計 ・バグトラッキングと品質改善プロセスの設計 ・QA プロセスの継続的改善 ・開発チームとの品質文化の構築 【使用技術・ツール】 ・Playwright(E2E テスト) ・GitHub / GitHub Actions(CI/CD) ・Datadog(監視・エラー分析) ・Claude / Claude Code / Cursor ※今後変更になる可能性がございます ・MCP ツール ・AWS / GCP

当社が手掛けるプロジェクト オープン系 ゲームアプリ開発 クラウド 仮想化基盤 DBの設計・構築 AI・ブロックチェーンといった先端技術　等 毎月15400件以上のお問い合わせがあり、多種多様の案件があるのが魅力! 案件の選択権はエンジニアにあるので、自由に選択できます! 今回は、ゲーム・アプリ・Webシステムの正常稼働、品質を守る方を募集になります! プロジェクト例 ◎某決算システム基幹システム性能テスト(Java) ◎NAND型メモリ製品の評価テスト実施、テスト設計(C言語、C++) ◎商業施設や店舗の什器管理システムの開発テスト　詳細設計～テスト実施(Python, JavaScript) ◎病院向けEC・決済システムの基本設計～テストまで(PHP) ◎既存Webシステムに新機能追加の受け入れテスト(SQL)　等 ある1日の流れ アプリ→「進む」の先へエラーが発生しないか ゲーム→正しい映像が流れるか といったテスト・検証を行い、結果をレポート作成します。 コードを見ながら改修する場合などもあるためスキルアップに直結! 入社後の流れ ★テスト未経験の方、経験の浅い方 先輩の元で基本業務から始めます。仕様書に沿ってバグやエラーを発見して報告していきましょう。分からないことは先輩に何でも質問できるので安心してください。経験・スキルに応じて少しずつ仕事の幅を広げ、将来的には「テストの設計図作成」にも取り組んでいただきます。 ★テスト経験者の方 経験・スキルを活かせる業務を積極的にお任せしていきます。得意分野に取り組んだり、新たなシステムに挑戦したり、キャリアアップの場として活用してください。また、適性に応じてリーダーポジションも用意します。マネジメント志向の方にも大きなチャンスを手にできる環境です。 開発環境 言語:Java、Python、C#、C/C++、PHP、JavaScript、TypeScript、Swift、Kotlin、Go、Dart、Shell、Ruby、COBOL OS:Windows、Android、iOS、macOS、Linux、RHEL クラウド:AWS、Azure、GCP DB:Oracle、DB2、MySQL、PostgreSQL、MongoDB、SQL Server　等

●ミッション 日本最大の医療従事者向けポータルサイトでの新サービス開発、既存サービス改善、社内システム開発における品質保証活動をリードし、最先端のIT技術を使って日本の医療現場を変革する。ソフトウェアエンジニアと協力して、高品質なプロダクトを素早く利用者に提供する。 ●担当事業・プロダクト 社内には多くの事業、サービスがあります。以下に一例を挙げます。 ・医療従事者向けメディア m3.com ・製薬企業のプロモーション支援サービス MR君 ・国内シェアNo. 1のクラウド電子カルテ エムスリーデジカル ・医療施設向け予約〜会計までできる総合サービス デジカルスマート診療 ・コンシューマ向けの健康相談サービス Askdoctors ・グローバル向けプロダクト ●担当業務 PCサイト、スマートフォンサイト、iOS/Androidアプリにおける品質保証活動を主導していただきます。 ・仕様、ワイヤーフレームのレビュー ・テストマネジメント(テスト計画、テストの見積もり、進捗管理、欠陥マネジメント) ・テスト設計、テスト実施、品質評価 ・リリース時の最終確認(工程漏れの確認、リリース後の本番動作確認など) ・テストプロセスや開発プロセス改善のリード ・他QAエンジニアの成長への貢献(カンファレンスの内容を共有、勉強会の開催など) ・自動テストの推進 ・その他サービスへの貢献(必要に応じてプロジェクトマネジメントや施策の起案をすることも可能) ●技術スタック ・テストケース管理: TestRail ・チャットツール: Slack ・ソースコード管理: GitLab ・チケット管理: JIRA / Redmine ・CIツール: GitLab CI / Jenkins ・その他: Confluence / Sentry / PostgreSQL / BigQuery / GCP / AWS ・自動テストツール: Selenium Webdriver / Playwright / mabl ●チーム体制 ・QAチームはテスターの方も含め約40名 ・QAメンバー間のつながりを利用し、各サービスの障害情報、プロセス改善事項の共有 ・自動テスト推進チームなど改善活動を推進する個別のタスクフォースの運営 ・各メンバーは担当サービスのメンバーとして各事業開発チームにアサインされます。 ・品質に理解のあるエンジニアが多く、チーム全体で品質改善に取り組んでいるチーム ・小規模な改修を繰返し行い週1回以上リリースする(新規サービス開発など例外あり) ・プロダクトマネージャ以外の職種もプロダクトをより良くするため活発な議論を行う 各メンバーは、組織横断のQAチームに所属しつつ、担当サービスの事業開発チームにもアサインされます。担当サービスの性質に合わせ最適なQA活動を主導しています。 上記と並行して、横断チームであるQAチームの横の繋がりを活用し、担当サービスで得た経験の共有を行うなど全体での改善も合わせて行っています。 ●働き方 エンジニアはリモート中心の業務です。月2回の出社タイミングにて、チーム内で負債解消デーやGameDay、勉強会、開発定例を組むなどしてハイブリッドな働き方を実現しています。 <入社時>上記に記載の業務 <変更の範囲>会社の定める業務、就業規則に従い出向となった場合は出向先の定める業務

※職務内容変更の可能性:有 ※変更の範囲:会社の定める業務 お客様のシステム開発プロジェクトにおいて、品質保証を担うエンジニアとしてご活躍いただきます。 単なるテスト実施の枠にとどまらず、 開発の初期段階から参画し、要件定義の妥当性レビューやプロジェクトに最適なテスト戦略・計画の策定を主導していただきます。 よりハイレベルなキャリアでは、 プロジェクト特性に合わせた品質保証計画の策定、 テストプロセスの標準化、および品質指標(KPI)の定義とモニタリングも行います。 開発の上流工程から早期に参画し、潜在的なリスクの洗い出しや 不具合を未然に防ぐための仕組みづくり(シフトレフト)を主導していただきます。 QAチームのマネジメントや育成、顧客および開発部門との折衝・調整など、 プロジェクトの品質責任者としての役割も担っていただくことがございます。 品質に対する最終的な責任を持つ立場として、 顧客の期待を超える高い信頼性と価値を備えたプロダクトを世に送り出し、 システムの安定稼働を技術で支える、非常にやりがいのあるポジションです。 組織全体の品質ガイドライン策定や、自動化やAIを駆使した先進的な品質保証手法の導入など、 全社的な品質向上戦略を推進できる環境であり、リーダーシップを発揮して顧客満足度の最大化に貢献していただきます。 具体的な案件例 ●官公庁向け 　　政府職員向け管理システムの品質管理チームの立ち上げおよび運営。 ●メーカー向け 　　基幹システム刷新プロジェクトに伴うシステムテスト、受入テスト、品質マネジメントチームの立ち上げおよび運営。

タイミーのQAエンジニアは、開発チームとともにプロダクト品質に向き合いながら、AIを前提に品質管理プロセスそのものを見直し、チームが自律的に品質を作り込める仕組みを設計・実装する役割を担います。 事業フェーズやプロダクトのリスクに応じて、必要なQAの強度を見極めながら、品質基準、AI向けのルール、評価モデル、テスト戦略を整備し、それらをCI/CD、自動テスト、テスト実行環境、監視・フィードバックの仕組みに接続していきます。単なるテスト工程の自動化ではなく、要求整理、レビュー、リスク分析、検証計画、フィードバックまで含めた開発プロセス全体を改善していきます。 具体的には、以下のような業務を想定しています。 ●品質基準・QAプロセスの設計と構造化 QA Handbook、QA Skills、テスト戦略、品質基準を整備し、チームが再現性をもって品質を担保できる状態をつくります。 要求仕様、AC、DoD、テスト観点を開発チームやAIが扱いやすい形に構造化し、開発プロセスの中で活用できるようにします。 ●リスクベースの品質設計 プロダクトや機能の特性を踏まえて品質リスクを整理し、どこに重点を置いて検証すべきかを設計します。 事業フェーズやリスクの大きさに応じてQA強度を調整し、人による判断と自動化のバランスを見極めます。 ●AI駆動開発に対応した品質ルール・評価の設計 AIエージェントが品質判断に活用できるよう、品質ルール、プロンプト、レビュー観点、評価基準を設計します。 AI生成物に対する品質ゲートやフィードバックの仕組みを整備し、AIを活用した開発でも品質を継続的に担保できる状態をつくります。 ●自動検証・テスト基盤の構築 プロダクトのテスタビリティ向上を主軸に、テストしやすい設計・テストデータ・実行環境・検証観点の整備を進めます。 自動テストやCI/CDと接続し、開発チームが継続的かつ効率的に品質を確認できるテスト基盤を構築・改善します。 ●セルフQA基盤の導入・展開 開発チームが自律的に品質を確認・改善できるよう、品質ガードレールや標準プロセスを設計・導入します。 品質基準を開発プロセスや自動検証の仕組みに接続し、品質保証を人手に閉じないスケーラブルな仕組みへ進化させます。 開発環境(主要な部分の抜粋) ●Backend 開発言語: Ruby 4.0系 アーキテクチャ: Ruby on Rails 7.2系、RSpec ●Frontend 開発言語: TypeScript アーキテクチャ: Next.js CSR(SPA), React Hooks, SWR ●Mobile(iOS) 開発言語: Swift ●Mobile(Android) 開発言語: Kotlin ●Infrastructure AWS:ECS Fargate, Aurora, RDS, S3, ElastiCache, CloudFront, etc… Elasticsearch(AWS Marketplace) Google Cloud(一部サービス) IaC:Terraform ログ:Datadog LogsとS3に集約 ●その他 コード管理: GitHub コミュニケーションツール: Slack, Notion その他:Firebase, twilio, ImageFlux, OneSignal, Figma etc… AIエージェント・LLMツール: GitHub Copilot Coding Agent, Devin, Cursor, Claude Code ●組織的な品質文化の醸成 サイクルタイム(要件定義からリリースまでの完了時間) やFour Keysなどのメトリクスを活用し、「フィードバックサイクルの短縮」が「品質改善スピード」に直結するという考え方を浸透させます。 ポストモーテムのファシリテーションや、テスト設計技法のレクチャーなどを通じて、チーム全体の品質意識とスキルを高め、自律的な改善サイクルを回せるように支援します。 開発環境(主要な部分の抜粋) ●Backend 開発言語: Ruby 3.4系 アーキテクチャ: Ruby on Rails 7.2系、RSpec ●Frontend 開発言語: TypeScript アーキテクチャ: Next.js CSR(SPA), React Hooks, SWR ●Mobile(iOS) 開発言語: Swift ●Mobile(Android) 開発言語: Kotlin ●Infrastructure AWS:ECS Fargate, Aurora, RDS, S3, ElastiCache, CloudFront, etc… Elasticsearch(AWS Marketplace) Google Cloud(一部サービス) IaC:Terraform ログ:Datadog LogsとS3に集約 ●その他 コード管理: GitHub コミュニケーションツール: Slack, Notion その他:Firebase, twilio, ImageFlux, OneSignal, Figma etc… AIエージェント・LLMツール: GitHub Copilot Coding Agent, Devin, Cursor, Claude Code 組織カルチャー ●開発組織のカルチャー タイミーの開発組織は個々人の志向や特性の多様性を「許容」するのではなく「歓迎」する組織です。 各メンバーの多様性を彩りとして捉えて決して否定せず、強みとして重ね合わせて、同じチーム、プロダクトの目標を達成を実現できる組織を目指しています。 また、チームトポロジーの考えを活用した組織構造を採用していることも特徴です。例えば、顧客価値に基づいて領域ごとに組織を分割したり、専任のエンジニアリングマネージャーやアジャイルコーチ、スクラムマスターなどマネジメント専門職メンバーを各チームに配置しています。 https://www.youtube.com/live/uJL3M7R8MLc?feature=share&t=3057 ●技術コミュニティ活動 社内の所属チームを超えたiOSやAndroidなど専門的な技術テーマごとに取り扱うコミュニティ活動も活発で、組織図を超えたオープンなコミュニケーションが行われています。 また、RubyKaigi や Kaigi on Railsを始めとしたカンファレンスのスポンサー活動やイベント登壇、記事の発信など技術コミュニティへの貢献や広報にも力を入れています。 ●オンボーディング メンバー一人ひとりが能力を発揮して、チームで活躍できる環境を目指して様々なオンボーディングプログラムを実施しています。 例えば、入社後チームや技術領域が近いメンバーがメンターとして伴走するオンボーディングの実施や、現職のスクラムマスターからスクラムに関する考え方や手法などをインプットするスクラムオンボーディング、配属直後にマネジメント層とのWelcome 1on1を実施しています。これからの取り組みによって、会社への不明点を早期に解決することで、新メンバーがタイミーで活躍しやすい環境を整えています。 https://productpr.timee.co.jp/n/n46122cd3ec6b ●働き方 フルリモート・フレックスの働き方が浸透しており、NotionやSlackを活用したテキストコミュニケーション、ハドルやMeetを使った同期的なコミュニケーションなどによって職種問わずコミュニケーションが活発な環境になっています。 また、所属チームを超えてiOSやAndroidなど専門的な技術テーマごとに取り扱うコミュニティ活動も活発で、組織図を超えたオープンなコミュニケーションが行われています。 https://productpr.timee.co.jp/n/n2dcb5475e249 ●DevEnable室の取り組み エンジニアの市場価値向上につながる成長支援、学習支援、機会提供、生産性向上を行う専門チームDevEnable室を設置しています。 具体的な制度の一部をご紹介します。 ・在宅環境を自分好みに整えられるリモートHQ制度 ・技術コミュニティ発展への貢献を後押しするOSSボーナス制度 ・世界中のカンファレンス参加を支援するKaigi Pass制度 ・最大300万円、勤務年数に応じて返済不要のエンジニア奨学金制度 ・DevEnable室に込めた思いについても記載していますので、よろしければぜひ下記URLもご覧ください。 https://product-recruit.timee.co.jp/tde10

ミッション "AI の出力品質を科学する — 評価手法の研究・開発で、エージェントの信頼性を証明する" LLM / AIエージェントの出力品質を、機械学習・統計学・計量心理学の手法で定量的に評価・改善します。本ポジションは「テストする人」ではなく、 「何をもって良いAIとするかを定義し、測定する科学者」 です。 期待する役割について AI Evaluation Scientist として、AI エージェントの品質評価基盤の設計・構築・運用をリードしていただきます。 ●評価メトリクスの研究開発 — LLM-as-Judge の校正、報酬モデリング、ベンチマーク設計を通じて「何をもって品質とするか」を科学的に定義します ●自動評価パイプラインの設計・構築 — 研究成果を本番 CI/CD に組み込み、スケーラブルな品質ゲートを実現します ●レッドチーミング・安全性検証 — adversarial testing の自動化、ポリシー準拠検証フレームワークを構築します ●統計的実験計画に基づく品質改善 — A/B テスト・有意差検定でプロンプト戦略やモデル変更の効果を定量的に検証します ●評価シグナルの研究・開発チームへのフィードバック — モデル改善の複利ループを構築します 約 200 社が本番利用するプロダクトの品質を「科学する」アプローチで担保します 業務内容 AI Evaluation Scientistとして、 AIエージェントの評価基盤 (Evaluation Infrastructure) の設計・構築・運用をリードしていただきます。 ●評価メトリクスの研究開発 ・LLM-as-Judge の校正手法の研究・実装 (rubric 設計、バイアス検出、proper scoring rules) ・評価ベンチマークの設計・構築・妥当性検証 (construct validity、contamination detection) ・報酬モデリング / preference learning の評価への応用研究 ・評価メトリクスの選定・設計 (win rate、task success、factuality、harm detection) ・評価セット (合成データ + 実ログ) の設計・構築・メンテナンス ●自動評価パイプラインの設計・構築 ・スケーラブルな自動評価パイプラインの設計・実装 ・CI/CD への評価パイプライン組込みと品質ゲートの構築 ・エージェント評価ハーネスの設計 (マルチターン・ツール利用・ロングコンテキスト対応) ・評価パイプラインの再現性・信頼性の担保 ●安全性・品質検証 ・自動レッドチーミング (automated adversarial testing) の研究・実装 ・安全性 / ポリシー準拠の検証フレームワーク構築 ・ハルシネーション検出・校正手法の研究・実装 ・プロンプト / ツール回帰テストの設計・実行 ●統計分析・実験設計 ・統計的実験計画 (A/B テスト、有意差検定) の設計・分析 ・品質トレンドの可視化・回帰検出の自動化 ・品質レポート作成と改善提案 ・評価シグナルの研究・開発チームへのフィードバック 業務シナリオ ※以下は想定される業務シナリオの例です ●シナリオ1: LLM-as-Judge の校正と妥当性検証 新しい評価メトリクスとして LLM-as-Judge を導入する際、judge モデルの校正 (calibration) を実施します。人間評価との一致率を統計的に検証し、rubric 設計を反復改善します。construct validity を確認した上で、自動評価パイプラインに組み込み、評価コストを 80% 削減しながら人間評価と同等の信頼性を実現します。 ●シナリオ2: 新モデル導入時の品質ゲート LLMプロバイダーが新モデルをリリースした際、既存のベンチマークスイートで回帰テストを実行し、factualityスコアが3%低下していることを検出します。原因を分析し、プロンプト調整で品質を維持したまま新モデルへの移行を完了します。 ●シナリオ3: 自動レッドチーミングによる安全性検証 金融機関向けにJAPAN AI AGENTを導入する際、自動レッドチーミングパイプラインを構築します。adversarial promptの自動生成・分類器による脆弱性検出を実装し、業界固有のリスクシナリオ(機密情報漏洩、不適切な金融アドバイス等)を網羅的にテストします。ポリシー準拠率99%以上を達成します。 ●従事すべき業務の変更の範囲 会社の定める業務 成果責任 (KR/メトリクス) ●評価カバレッジ率(テストケース網羅率) ●回帰検出率(リリース前の品質劣化検出率 ≥ 95%) ●評価パイプライン実行時間(CI/CD内で完了) ●LLM-as-Judge と人間評価の一致率 ●False Positive / Negative 率 ●安全性インシデント発生率(リリース後) チーム体制 約120名が開発組織に在籍しています。 AI Evaluation Scientistは品質保証の専門チームとして、以下のチームと密接に連携します: ●密接に連携する役割: ・Agentic Product Engineer — エージェント機能開発 ・Research Engineer — 研究開発・モデル改善 ・Agent Harness Engineer / Software Engineer (AI Platform) — AI 実行基盤開発 ・Product Manager — プロダクト設計・品質要件定義 開発環境 ●言語 : Python (評価パイプライン・分析), TypeScript / React / Next.js (フロントエンド部) / NX ●評価 / QA : pytest, LangSmith, Weights & Biases, custom eval frameworks ●データ : BigQuery, Spark, Pandas ●インフラ : GCP (コンテナ / K8s), Docker, Terraform ●CI/CD : GitHub Actions ●ツール : Slack, Confluence, Linear, Google Workspace, GitHub, Notion ●AI 開発支援 : Claude Code MAX Plan, Cursor, ChatGPT, Devin ●作業環境 : Mac (Apple Silicon), デュアルモニタ対応

●このポジションの3つの特徴 01　「本番で信頼できるAIエージェント」をサービスにします LLM・RAGを使ったAIエージェントを作るだけでなく、評価・品質の担保まで含めて顧客に届けます。作る側(AI開発)と確かめる側(品質保証)が同じ組織にあるからこそできるサービスです。 02　AI開発・品質保証のエンジニアを率いて、サービスをつくります 一人で作り込む仕事ではありません。社内のエンジニアでチームを組み、役割を分け、設計とレビューを担い、技術の判断をしながら開発を進めます。ご自身も手を動かし、チームに見本を示します。 03　仕事のキモは「チームで提供できる」状態をつくることです 作って終わりではありません。開発の型(AI駆動開発の標準・品質ゲート)と評価の型に落とし、誰が作っても品質を落とさずに提供できるチームをつくることが、このポジションの成果です。 ●このポジションで得られるもの ・AIエージェント×品質保証という、まだ勝者の決まっていない領域で、サービスを立ち上げる経験。 ・作る(AI開発)・確かめる(品質保証)・直すがひとつの組織にそろった環境で、チームを率いて開発できること。 ・自分たちがつくった型に価格がつき、チームで顧客に届く経験。 ・サービスの責任者として、サービスとチームを育てていく道。 ## 業務内容 担当するサービスについて、次の5つを担っていただきます。どれも切り離せない仕事ですが、最も大切にしていただきたいのは「4. チームで提供できるようにする」です。作って終わりではなく、ご自身がいなくても、チームが同じ品質で提供できる状態をつくることが、このポジションの成果です。 【1. 決める ― サービスの中身と、提供の形を決める】 ・顧客の業務と課題から、AIエージェントで何を解き、どの水準の品質を約束するかを決めます。 ・提供メニュー・手順・品質基準・価格の考え方を、事業の責任者と相談しながら決めます。 【2. 作る ― 自らも手を動かし、技術の判断を担う】 ・AIエージェントの設計、RAG・データ基盤との連携、評価の仕組みなど、要となる部分はご自身でも作り、試します。 ・担当する範囲のアーキテクチャ・技術選定・品質の基準について、技術の判断を担います。 【3. 率いる ― AI開発・品質保証のエンジニアを動かして開発する】 ・社内のAI開発・品質保証のエンジニアでチームを組み、役割を分け、開発を進めます。 ・設計・コードのレビュー、評価結果の確認を通じて、チームの成果物の品質に責任を持ちます。 【4. チームで提供できるようにする ― 型にして、誰が作っても品質を落とさない状態にする】 ・開発の手順、AI駆動開発の標準、品質ゲート、評価の設計を「型」として書き起こし、チームで使える状態にします。 ・型をメンバーに教え、ご自身がいなくても、チームが同じ品質でサービスを作り、提供できるようにします。 【5. 届ける ― 顧客の前に立ち、最初の提供をやり切る】 ・営業担当と組み、技術面の提案を担います。 ・最初の案件では、チームを率いて導入・提供をやり切り、社外の実績をつくります。 #### ●技術環境 【言語 / フレームワーク】 React、TypeScript(フロントエンド)/Python、C#(バックエンド) 【クラウド】 Azure(AWS・GCPのご経験も歓迎) 【データベース / 基盤】 PostgreSQL、Databricks 【AI領域】 生成AI(LLM/RAG/AIエージェント)を活用したAI駆動開発 【AI開発ツール】 Claude Code、Cursor、GitHub Copilot、Codex、CodeRabbit 【品質保証・評価】 テスト設計、テスト自動化、CIの品質ゲート、AIの評価設計(評価データセット・自動評価・回帰評価) ●入社後のロードマップ 【入社〜3ヶ月】 進行中のAIエージェント基盤・品質担保の型づくりに加わり、チームと技術の現状をつかみます。あわせて、自社の業務を題材にしたAIエージェントの開発を、評価の設計まで含めてリードし、サービスの原型を1つ形にしていただきます(例:営業支援のAIを、品質の基準まで含めて自社で使える状態にする)。 【3〜6ヶ月】 自社で確かめた結果をもとに、提供メニュー・品質基準・価格の案を固め、営業担当とともに既存の顧客に提案します。開発と評価の手順を、チームの型として書き起こします。 【6ヶ月〜1年】 社外の顧客への提供実績をつくります。チームのメンバーが型に沿って、品質を落とさずに作れる状態にします。 【1年〜】 サービスの責任者として、サービスとチームを育てていただきます。次のサービスの立ち上げや、型を使えるエンジニアの育成もリードいただきます。 ※ 進む速さはご経験と成果によって変わります。どこから担っていただくかは、ご経験をうかがったうえで一緒に決めます。 ●あえてお伝えしたい「厳しいリアル」 【サービスはまだ「売れる形」になっていません】 社外への提供は、最初の1件をつくる段階です。提供メニュー・価格・品質基準は整備の途中で、何を型にするかを決めるところから関わっていただきます。 【チームのメンバーは、顧客の案件と兼務の人もいます】 サービス開発に関わるエンジニアの稼働は、事業の責任者と調整しながら確保します。限られた時間の中で、役割を分け、成果につなげるリードが求められます。 【立ち上げの段階は、ご自身が手を動かす場面も多くあります】 チームを率いる役割ですが、型ができるまでは、要となる部分をご自身で作り、見本を示す場面が多くなります。 【営業を一人で背負う必要はありませんが、顧客の前には立っていただきます】 営業担当と組む体制で進めます。一方で、技術面の提案や最初の提供では、ご自身が顧客と直接向き合います。 【原則「出社」の環境です(リモートワーク不可)】 立ち上げの段階は、事業の責任者・チームのエンジニアとの密なコミュニケーションと、速い意思決定が欠かせないと考えているためです。 ●このポジションではないこと ミスマッチを防ぐため、あらかじめお伝えします。 ・全社のDX・変革を企画し、推進する役割ではありません。担っていただくのは、AIエージェント×品質保証のサービスです。 ・資料づくりや取りまとめが中心の、PMO・企画の役割ではありません。技術の判断と、ご自身が手を動かすことが欠かせません。 ・一人で作り込むスペシャリストの役割でもありません。エンジニアのチームを動かし、チームで提供できる状態をつくることが仕事の中心です。 ●担当していただくサービス 【サービスの方向性】 本番で信頼できると担保されたAIエージェントを、顧客に届けるサービス 【サービスの中身(例)】 ① AIエージェントの構築:業務の分解から、AIエージェント・ワークフロー型AIの設計・構築、既存システム・データとの連携(LLM・RAG、AIエージェントを支えるデータ基盤を含む)、運用まで ② 品質の担保:正確性・タスクの完了・権限・安定性・安全性・業務への適合の観点での評価設計、評価データセットと自動評価、モデル更新時の回帰評価 ③ 作り方の型:AI駆動開発で、速く、品質を落とさずに作るための開発標準・レビュー基準・品質ゲート 【いまの進み方】 複数のチームが並行して、AIエージェント基盤と品質担保の型づくりを進めています。自社の業務(営業支援のAIなど)を題材に作り、まず自社で効果を確かめてから社外へ届けます。大手SIerのプロジェクトにはチームで参画し、AIエージェントを支えるデータ基盤の開発も進めています。 【一緒に動くメンバー】 社内のAIソリューション開発のエンジニア、品質保証(QA・テスト)のエンジニア、営業担当 【いまの状態】 社外への提供は、最初の1件をつくる段階です。提供メニュー・価格・品質基準は整備の途中です。 ※ どこから担っていただくか、サービスの中身をどう広げるか、社内のリードエンジニアとどう役割を分けるかは、ご経験と得意な領域をうかがったうえで一緒に決めます。 ●従事すべき業務の変更の範囲 →会社の定める業務

ミッション ソフトウェアエンジニアリングとAIを駆使して、テストの自動化とテストケースのライフサイクル全体の質を高め、プロダクト品質とリリース速度を両立させる現在、QA業務のうち約50〜60%はすでに自動化されており、基盤としては一定の水準に達しています。このポジションで問われるのは自動化率を積み増すことだけでなく、未自動化領域の自動化・既存テストの品質改善・テストケースのライフサイクル管理を仕組み化し、改善が自走するサイクルを作ることです。 期待する役割について テストの自動化・既存テストの品質改善・テストケースのライフサイクル運用の3方向をリードし、AIを活用しながらQAプロセス全体が継続的に良くなる仕組みを構築・運用していただきます。 ・自動化できていない領域を見極め、優先度をつけて自動化する ・既存の自動化されたテストの品質(網羅性・保守性・シグナルの信頼性)を継続的に改善する ・テストケースのライフサイクル(作成・実行・評価・棚卸し・廃止)を設計し、改善が回る仕組みを構築・運用する ・AI/LLMを用いたテストケース生成・改善エージェントを構築する ・品質課題をプロダクトチームにフィードバックし、エンジニア/ビジネス/CSとの橋渡しを行う ・約400社が本番利用するプロダクトの品質を、自動化・品質改善・仕組み運用の3方向から担保する 業務内容 ●未自動化領域の自動化 ・自動化できていない箇所を洗い出し、優先度をつけて自動化する ・AI/LLMを活用したテストケース生成エージェントの構築 ・CI/CDへの自動テスト組み込み・回帰テストの整備 ●既存テストの品質改善 ・既存テストケースの品質(重複・カバレッジ・保守コスト・シグナルの信頼性)を精査し、改善する ・Flakyテストの検知・修正、形骸化したテストの棚卸し ・テスト設計・品質基準の策定、良いテストケースの記述 ●テストケースのライフサイクル設計・運用 ・テストケースの作成〜実行〜評価〜棚卸し〜廃止までのライフサイクルを設計する ・改善が継続的に回る仕組み(レビュー体制・メトリクス・運用フロー)を構築・運用する ・JAPAN AI STUDIOを活用したQA・テスト業務の仕組み化 ・品質課題をプロダクトチームにフィードバックし、エンジニア/ビジネス/CS/非エンジニアとの橋渡しを行う チーム体制 約150名が開発組織に在籍しています。 密接に連携する役割: ・Agentic Product Engineer — エージェント機能開発 ・Research Engineer — 研究開発・モデル改善 ・Agent Harness Engineer / Software Engineer (AI Platform) — AI 実行基盤開発 ・Product Manager — プロダクト設計・品質要件定義 開発環境 言語 : Python (評価パイプライン・分析), TypeScript / React / Next.js (フロントエンド部) / NX 評価 / QA : pytest, LangSmith, Weights & Biases, custom eval frameworks データ : BigQuery, Spark, Pandas インフラ : GCP (コンテナ / K8s), Docker, Terraform CI/CD : GitHub Actions ツール : Slack, Confluence, Linear, Google Workspace, GitHub, Notion AI 開発支援 : Claude Code MAX Plan, Cursor, ChatGPT, Devin 作業環境 : Mac (Apple Silicon), デュアルモニタ対応 従事すべき業務の変更の範囲 会社の定める業務

QA業務をAIエージェントが自律実行できるハーネスを設計・実装します。 【具体的な業務内容】 ・ハーネスエンジニアリングの実践 └ハーネスエンジニアリングの枠組みの中で、QA業務を担う各工程のAIエージェントを設計、構築します。 ・リスク分析/テスト分析/テスト設計エージェント └仕様書を分析し、その後の実装や自動テストコーディングへの入力を生成するQAの上流工程を担当するAIエージェントを設計、実装します。 ・自動テストコーディング、自動テスト実行エージェント └テスト設計結果を自動テストとして実装し実行するQA業務の中核となるAIエージェントを設計実装します。 ・CQフィードバックパイプラインの設計・実装 ・不具合/障害情報の集積、分析基盤の構築 └エラーログ/AIエージェント実行ログ/不具合レポート/障害レポートなどを集積し、後続の分析や再発防止策の策定を実施するための基盤を整備します。 ・障害分析や再発防止策実施エージェントの設計、実装 └AIや人間のミスの結果である障害情報を分析し、それらをAIエージェントから利用可能なコンテキストやSKILLの形に実装するAIエージェントの設計、実装をします。 ・外部AI動向の追跡と発信 ・Harness Engineering等のAI分野の最新動向を追跡し、業務設計に落とし込む ・社内の実践と学びを技術ブログ・カンファレンス等で外部発信する 【開発環境】 ●AIエージェント:Claude Code(SKILL / Sub-agent / Hooks / Agent Teams)/ Devin / MCP Server ●テスト自動化:Selenium, Appium, Cucumber, Playwright ●CI/CD:CircleCI, Bitrise ●データ基盤:BigQuery, Tableau ●タスク管理・分析:Asana ●コミュニケーション:Slack, Teams, GitHub, Confluence, Miro ●開発技術スタック:Ruby on Rails, React.js, Next.js, Swift/SwiftUI, Kotlin 【所属部門】 食べログカンパニー 開発本部 品質管理部 【ミッション】 品質管理部は「QA業務をAIが一貫して担う」ことを目指す長期ビジョン Continuous Quality by AI(CQ by AI) を推進するチームです。 そのAIが正しく品質を判断できるよう、QAの知識と基準をAIに渡すエキスパートとして参画していただきます。 単にテストを効率化するのではなく、「リリース前のチェックポイント」だったQAを、開発プロセスそのものに埋め込まれた自律的な仕組みへと変える取り組みです。 月間数千万人が使う食べログで、AIエージェントがコードレビュー・リスク分析・E2Eテストを担い、最終承認のみ人間が行う品質保証の実現を目指しています。 すでに自動テストコーディングでコード生成精度97%・テスト実行工数52%削減・自動化率64%の実績を上げており、その先のフェーズを共に作る段階にあります。 このポジションは AIが正しく品質判断できるようにQAドメインのナレッジをハーネスエンジニアリングの枠組みの中でガードレールやチェックリスト、基準などとして整備する役割 です。 従来のQAエンジニアが「自分でテストを設計・実行し、品質を判断する」のに対し、このポジションは「AIが判断するための基準を設計・検証し、AIの判断結果をレビューする」へと役割が変わります。 QAエンジニアとしての専門知識を活かしながら、業界でもまだ先例の少ない「AIに品質を教える仕事」を担っていただきます。