BIエンジニア(Docker)の求人・転職情報

●主にお任せしたいこと ①データ収集・パイプライン領域 ・各DBのデイリーミラーリング取込基盤の運用・改善(ジョブフロー再設計、取込時バリデーション、エラー通知の整合性改善、障害対応と再発防止) ・TROCCO・Cloud Workflows・Cloud Run を用いた非DBデータの取込パイプライン構築・運用 ・生成AIを組み込んだ、書式揺れに強い非構造データ取込パイプラインの構築 ・取込ソース追加のゼロデプロイ化(設定駆動化)など、DE運用工数を構造的に減らす自動化 ・Reverse ETL等の新しいデータ連携要件への対応と、取込基盤の適用範囲拡大 ②データモデリング・提供領域 ・4層モデリング設計方針に基づく staging / dwh(dim・fct)/ mart 各レイヤーのdbtモデル実装と、テストによる品質担保 ・BI(Looker Studio / Lightdash等)へのデータマート提供と、事業部のデータ活用支援 ・各種メタデータを統合的に集約したデータカタログの展開によるヒューマン・AIフレンドリーな意思決定支援の価値最大化 ・セマンティックレイヤーによる指標定義の実装 ・安定した指標提供におけるセマンティックレイヤー自体の費用対効果の技術検証、その他カタログなどのツール間の比較検証などのR&D活動 ・AIエージェント向けアクセス経路の整備やエージェント品質の継続評価・民主化に向けた仕組み作り ③運用・ガバナンス領域 ・GitHub Actions を軸としたCI/CD・自動デプロイ・規約lintの運用・改善 ・BigQueryの利用実態モニタリングとコスト最適化(FinOps)への参画 ・事業部からのデータ要望に対する要求・要件定義、スコープ合意からデリバリーまでの一連の対応 ・Claude Code等のAIエージェントを開発ワークフローに組み込んだ、エンジニアリング業務の生産性改善を通したDataOpsのエンハンス ・アクセス制御(列レベルマスキング・行レベルアクセス・個人情報カラムの自動特定)のdbt/Terraformによる実装 【チームの紹介】 ・全社・事業部でのデータ活用を支えるため、データ基盤の整備・運用、データマートの構築、BIツールの活用支援を担当 ・新データ基盤が本番稼働し旧システム群の停止が完了したことを受け、現在はdbtへの移行やセマンティックレイヤー・データカタログの整備を進め、より多くのメンバーが安心してデータを活用できる環境づくりに注力 ・社内のデータ民主化をさらに進めるとともに、経営課題に対する戦略的な意思決定を支えるデータ分析基盤の高度化にも取り組んでいる 【プロダクト開発環境】 ・インフラ:GCP, AWS ・プロジェクトデザイン:Miro, Figma ・利用言語やフレームワーク:Python, Go, SQL ・ドキュメント管理:Confluence, Google Drive ・チケット管理:Jira ・コミュニケーション:Slack ・コンテナ技術:Docker, Kubernetes ・Data Warehouse:BigQuery ・ETL:Cloud Functions, Dataform ・データコレクタ:Dataflow, Pub/Sub ・Database:Cloud SQL, Cloud Spanner, AlloyDB, PostgreDB(Amazon RDS) ・構成管理:Terraform ・監視:Cloud Monitoring, NewRelic ・ワークフロー:Airflow ・CI/CD:GitHub Actions

●入社後～中期的にお任せしたいこと 【主な業務内容】 データ活用を支える“基盤から分析まで”を一貫して担うデータエンジニアを募集します。 当社では、企業のDX推進やデータ活用ニーズ拡大に伴い、データ基盤強化を推進しています。 本ポジションでは、データ取得・蓄積・加工・可視化・分析まで、エンドツーエンドでデータ活用を支える業務に携わっていただきます。 ご経験に応じて、要件定義から設計・開発・運用保守まで一気通貫で担当できる環境があり、BI・データ分析など幅広い技術領域に挑戦可能です。 【具体的な業務内容】 業務システムの設計・開発・運用 データ基盤(DWH/データレイク等)の設計・構築 ETL/ELTパイプラインの設計・開発 クラウド環境(AWS/GCP/Azure等)を活用した基盤構築 BIツール連携・データ可視化基盤の整備 データ品質管理・ガバナンスの整備 データ活用に関する技術選定・アーキテクチャ設計 【開発環境(例)】 ・クラウド:AWS/GCP/Azure ・言語:Python/SQL ・DWH:BigQuery/Snowflake ・DB:MySQL/SQL Server/PostgreSQL ・ETL:Glue/DataSpider ・BI:Tableau/Power BI ・ローコードツール:Kintone/Pleasanter 【業務内容】 雇入直後…事業部の指定する業務及び付随する業務 変更の範囲…社内におけるすべての業務

●業務概要 パーソルグループ企業もしくは提携企業にて顧客や社内の部門に対して、お客様が保有する様々なデータを活用可能な形に処理し、データ分析のための基盤構築をお任せします。 データサイエンティスト/アナリストが行う仕事の基盤をつくり、お客様が抱える課題を解決まで導く業務となります。 ●業務詳細 ・データ収集・連携 　└外部SaaS/業務システムなど異なるソースからのデータ取り込み 　└バッチ開発やストリーミング処理 ・データ基盤の設計・構築・運用 　└DWH・DB・テーブルの設計(SQL、スキーマ、パーティショニング) 　└クラウドインフラの構築(AWS/GCP/Azure)、セキュリティ・ネットワーク設定、コスト最適化 ・データ整備・品質管理 　└ETL/ELTパイプラインの実装(dbt、Apache Kafka、Apache Spark) 　└データモデリング(スタースキーマ・Snowflake)、メタデータ管理、データカタログ整備 ・データ品質監視 　└検査ルール、データガバナンスの設定 　└アラート対応、テスト設計 ・提供・可視化支援 　└分析用マートの提供、BIツールへの接続最適化・可視化(Looker、Tableau、Power BI) ・運用・信頼性 　└パイプラインの監視・障害対応・パフォーマンスチューニング 　└Gitによる変更管理 プロジェクト例 ●Databricksを用いたデータ基盤の設計構築 <業務内容> 　・Databricks上のデータ基盤の設計/構築/検証 　・SAPのテーブルをDatabricksに連携 　・S3のテーブルをDatabricksに連携 　・ストリーミングテーブルの実装、ジョブ作成 <技術> 　Databricks, PySpark, SparkSQL, PowerBI, Git ●dbtを用いたETL、データパイプライン構築 <業務内容> 　・データパイプライン構築、フロー図作成 　・Bigqueryからのデータ抽出、データマートの設計・開発 　・ワークフローの監視 　・バッチ処理開発・運用 　・Tableauダッシュボードの設計・構築・運用 <技術> 　GCP(Bigquery,GCS), dbt, Tableau, Git

●活動内容 データウェアハウスの設計・構築・運用 BIツールを活用したダッシュボード作成とレポーティング データ品質向上のための施策立案と実装 新しい分析基盤やツールの検証・導入提案 ●活動事例 ヘルスケア:ヘルスケア関連データの分析とレポート作成支援(チーム:4名、期間:約3か月、その後間欠的に継続中) 教育:デジタル教育サービスのUX向上を目指したデータ分析支援(チーム:2名、期間:約1年) 海運:帳票業務の自動化と効率化を実現するためのBIサービス運用支援(チーム:1名、期間:約2年～継続中) 調査:市場調査データの分析基盤構築支援(チーム:4名、期間:約1年半～継続中) ゲーム:アミューズメントゲームのKPIレポート作成支援(チーム:2名、期間:約2か月～継続中)

HRカンパニーのアナリティクスエンジニアとして、ビジネスやプロダクトの成長を加速させるため、「データ分析による課題解決」と「信頼性の高いデータ基盤の構築」の両輪を担っていただきます。 「求人ボックス」を主軸としながら「エンゲージ」とのデータシナジーを活かし、カカクコムグループ全体のデータ活用価値を高めることがミッションです。 【具体的な業務内容】 ・ビジネスやプロダクトの課題特定、および解決に向けたKPI設計・管理指標の策定 ・Adobe Analytics、GA4を用いた計測要件の定義 ・BigQuery等を用いたELT処理の実装、データモデリング、クエリチューニング ・分析効率と品質を高めるためのデータマートの設計・構築・運用 ・Looker Studio等を用いたダッシュボード構築、および可視化環境のパフォーマンス管理 ・統計的手法を用いた仮説検証、施策の効果測定、およびネクストアクションの提案 ・データの品質モニタリング(テスト実装)や、集計ワークフローの自動化 ・求人ボックス全体のデータ基盤(DWH)のアーキテクチャ設計や技術選定への参画 【業務環境】 プロジェクト管理:Confluence / Jira ソースコード管理:GitHub Enterprise 生成AIツール:Cursor / Dify コミュニケーション:Slack コラボレーション:Miro Officeツール:Google Workspace / Box / Microsoft365 端末:Windows(MacBook Proも選択可) 【開発環境・技術スタック】 言語:Python / SQL インフラ:Google Cloud / BigQuery コンテナ/IaC:Docker BI:Looker Studio 計測ツール:Adobe Analytics / GA4 他基盤関連:Vertex AI / Cloud Run / GCE / Workflows ▼入社後のイメージ 1か月目 ・社内システムやデータ基盤の理解 ・既存の分析プロジェクトの把握 ・チームメンバーとの関係構築 2か月目以降 ・新規プロジェクトの担当 ・チーム内での知見共有や後輩の指導

Cloud Solution部　Data&AIグループのエンジニアとして、以下のような業務を担当してくださることを想定しています。 ●具体的な仕事内容 ・PJ推進(計画策定、要件定義、設計、テスト、ユーザー教育) ・PJ管理(定例会議運営、メンバー配置最適化等) ・顧客提案(提案資料作成、情報収集、社内調整) ・ナレッジ活用(収集、整理、蓄積、活用施策支援) ・本部、部門運営(本部PJ参画、契約書レビュー支援、サービス企画PJ参画、採用・育成) 想定されるプロジェクト ●プロジェクト事例 ・大手製造業:エンジニアが持つ暗黙知化されたノウハウのデータ化による技術情報の公開

業務内容 弊社は現在、データウェアハウス(DWH)を活用した最先端のデータソリューションに注力しており、その戦略の中核を担うデータエンジニアを募集します。DWHを中心としたデータ基盤の設計・構築から、データ活用、さらには高度な分析基盤の構築までを幅広く手掛け、お客様のビジネス課題解決とデジタルトランスフォーメーション(DX)を強力に推進していただきます。 具体的な仕事内容 ●顧客の課題ヒアリングからのソリューション提案、顧客との要件定義 ●データウェアハウス/データレイクの設計・構築・運用・改善 ●BIツールや分析基盤の導入・運用支援、データ可視化 ●データ活用のためのルール整備とセキュリティ強化 使用技術(例) ●クラウドプラットフォーム: AWS (S3, Kinesis, SQS等), Azure (Blob Storage, Event Hubs等), GCP (Cloud Storage, Pub/Sub等) ●データベース: PostgreSQL, MySQL, DynamoDB ●データウェアハウス: Snowflake, Amazon Redshift, Google BigQuery, Databricks ●データ処理基盤: Python, SQL, Java ●ETL/ELT サービス: TROCCO, Fivetran, Talend, dbt, AWS Glue, Azure Data Factory, Google Cloud Dataflow ●BIツール/データアプリケーション: Tableau, Power BI, AWS QuickSight, Looker, Streamlit ●その他: Git, Docker, Terraform メインとなる顧客業界は小売・流通業界となりますが、お客様の課題解決のため、その他の業界のプロジェクトにも積極的に取り組んでいます。 特定の業界経験や深い知識は入社時点では必須ではありませんが、プロジェクトを通じて様々な業界のドメイン知識を習得し、顧客業務への理解を深めていただくことを期待しています。 データエンジニアとして幅広いフィールドで活躍したいという意欲のある方を歓迎します。 顧客課題の解決やプロジェクトの成功を最優先にITプロフェッショナルとして、自身のスキルセットを柔軟に変容させながら、データ技術の進化と共に、自らも成長し続ける意欲のある方をお待ちしています。 ※担当案件によっては当社正社員として、客先企業へ無期雇用派遣となる可能性があります 【変更の範囲※1】 会社内の全ての業務、客先の業務、将来的に出向を実施した場合は出向先の全ての業務(ただし本人と相談の上で決定します) ※1 「変更の範囲」とは、将来の配置転換などによって変わり得る就業場所・業務の範囲を指します。