データエンジニア(Kaggle)の求人・転職情報

【本ポジションのミッション】 ～10X(10倍の成長)に耐えうる、攻めのデータプラットフォームへの進化～ 現在、当社のデータ基盤は、主軸サービスであるロボアドバイザーがユーザー数45万人・預かり資産1兆9,000億円(2026年2月時点)を突破したことに加え、個人向け金融プラットフォームを目指し、新規事業の多角化により、扱うデータ量と複雑性が飛躍的に増しています。 単なるデータの蓄積や可視化に留まらず、10倍のデータ量や多様なステークホルダーの要望を先回りして解決する、スケーラブルなデータプラットフォームへと再構築することがミッションです。自ら課題を抽出し、技術で事業成長を加速させる攻めのデータエンジニアリングを作る仲間を募集しています。 【業務内容(期待する役割)】 ●データ基盤・パイプラインの設計と構築 ・AWSとGCPを跨ぐクロスクラウド環境において、セキュリティを考慮した権限設計および安全なデータ連携・受け渡しの仕組みの設計・構築 ・Airflow等のワークフロー管理ツールを用いた、Pythonによるメンテナンス性・可読性の高いデータパイプライン(DAG)の開発 ●事業要件に基づくデータモデリング・システム設計 ・事業チームと密にコミュニケーションを取り、分析要件をシステム仕様へ落とすコミュニケーション ・データ利用者にとって理解しやすく、かつや運用負荷を考慮した、持続可能なデータモデリングの設計・実装 ●データマネジメントの確立とセキュリティ・信頼性の担保 ・Knowledge Catalog等のデータカタログを活用したメタデータ管理と、データ品質チェックパイプラインの組み込み・自動化 ・金融機関に求められるセキュリティ(機密データの精査、アクセス権限設計等)の考慮、障害監視、およびパイプラインの依存関係の整理・最適化による高可用なシステム設計 ●パフォーマンス最適化とアーキテクチャ改善 ・今後の急激なデータ量増大を見据えた、各種マネージドツールのスケールアップ・バージョンアップ、およびパイプライン全体のボトルネック解消 ・ビジネスの拡大に合わせた、最適なツールやアーキテクトの選定・検証および移行計画の策定と実行 【データ基盤を強くするために今後取り組みたいこと】 ●データカタログの導入 ・複数プロダクト投入前にカタログの運用フローを固める ・AI Readyなデータ基盤の実現 ●複数プロダクトデータの投入 ・事業ごとのデータソースの違い ・個人情報のリスク ・分析したいKPIの定義 ・関連ツール(CRM・MA)のマルチプロダクト化 ●アーキテクトの強化 ・マネージドツールのバージョンアップ戦略 ・デジタルバンク開業による、データ増大への対応 ・データの連携処理の見直し ・全量洗い替え処理の改善 ・データ処理時間の削減・コスト対策 【技術スタック】 ・DWH:BigQuery ・インフラ:AWS, GCP ・IaC: Terraform ・ワークフローエンジン:Apache Airflow ・ETL: Amazon Appflow ・使用言語:SQL, Python など 【働き方】 弊社はフレックス制(コアタイム:10:00〜16:00)のハイブリット型の勤務形態で、週2日リモート可能です。 労働時間の清算期間は月単位(=営業日数×8時間を月単位で担保いただく)となるため、コアタイムを中心とし、柔軟に就業できます。 またチーム内には小さいお子様がいる社員もいるため、何かあった際に相談しやすい環境です。

ソフトウェアエンジニアは、専門性およびプロジェクトのニーズに合わせて幅広い業務を行っております。以下に一例を示します。 ●Conata の製品群を操作・閲覧する Web フロントエンドおよびそのバックエンド (BFF)について、共通部分・ライブラリの開発および改善、各案件向けカスタマイズのサポート ●上記業務プロダクトのUI/UX設計 ●データ収集 └パートナー・クライアントとのデータの受け渡しをするためのインテグレーションシステムの構築 ●データ処理 └データの ETL/ELT 処理の開発。また安定的に動作させるためのデータ処理パイプラインの構築 └バッチ / ストリーミングベースのシナリオに対応したシステムの開発と運用 ●データ管理 └収集したデータ、処理済みデータを保存・活用するためのデータウェアハウスの設計と構築 └センシティブなデータを安全に処理可能にするためのシステム設計・構築 ●負荷試験、セキュリティー対策 ●データベース設計 ●サービスの安定提供を24時間365日、維持するためのシステム運用 ●開発環境や運用の整備・改善 └インフラ、開発ツールチェイン、社内情報管理ツール開発・最適化。 従事すべき業務の変更の範囲:なし 開発環境 クラウド:AWS 開発言語:Kotlin、Python、TypeScript フレームワーク・ミドルウェア等:React、Next.js、MySQL、Redis、Elasticsearch、Snowflake、Micronaut、gRPC、Apache Pulsar、Amazon S3、Amazon Athena、Dagster、Bazel、Amazon EKS(Kubernetes)、Terraform SaaS:Auth0、Vercel 組織とポジションについて ●配属予定組織 ・Product Architectチーム 大規模商用化に適したプロダクトの基幹設計・開発・保守を担います。 ・Core Technologyチーム エンジニアリングチームを横断し、技術の一貫性・効率・革新を促進します。 ・Technical Planning & Enablement チーム 開発プランニング(プロダクト開発計画の策定)、チーム連携(各チーム間のブリッジ役)、プロダクトのデリバリー支援・活用、プロダクトの品質評価や改善等を担います。 シニアソフトウェアエンジニアは、顧客のデータ活用における課題解決をメインミッションとして、日々拡大しているデータの量・種類に技術をもって対応しながら、安定した価値提供に取り組んでいます。また、運用性・安全性の向上、技術課題の解決や支援を通じてチームの発展と顧客への高付加価値なソリューション提供を実現します。

●データの統合と見える化を可能にするためのプラットフォームの開発 ●クライアントデータ分析におけるディレクション、運用 ●データ解析をもとにしたニーズ探索およびサービス企画デザイン

機械学習エンジニアは、入札最適化ロジックに関わるエンジニアリング業務を担当します。私たちは、フルサイクルなデータサイエンスチームです。ビジネス課題に対し、データ分析を通した仮説の構築から始まり、プロダクト環境でのA/Bテストまでを行います。 ●具体的に次のようなタスクを担います。 ・入札ログ等を用いた探索的分析 ・入札ログの再設計や外部データの活用 ・CTR/CVR予測モデルなど機械学習モデルの構築 ・数理最適化や制御工学などを用いた入札価格最適化ロジックの構築 ・オンライン実験を含めたプロダクト環境での仮説検証 ・大規模データを活用するための分析基盤および、MLパイプラインの構築・運用 ・学会参加や論文調査による情報収集 ●業務上触れる分野や技術スタック 【分野】 ・機械学習 ・統計学 ・数理最適化 ・制御工学 ・因果推論、計量経済学 【スタック】 ・Python, Kotlin(一部のみ) ・AWS ・dbt, Snowflake ・Prefect ・Terraform ・GitHub ・Slack

●担っていただきたい役割 本ポジションでは、データを中核とした開発・業務革新の推進役として、顧客とともに価値創造に取り組んでまいります。 あなたの強みと弊社のエンジニアリング、データサイエンス、ビジネスナレッジを組み合わせ、フルサイクルで開発を決めることができます。 「最速で価値を提供すること」:そのために様々な開発手法を学び改善プロセスに組み込む 「業務データの価値を引き出す」:そのために高い視座・広い視点、それを支える専門性が必要 「専門性のコラボレート」:隣接領域への理解とリスペクトが近づく 当社のエンジニアは、データを軸としながら多様なバックグラウンドと専門領域を持ち寄り、フロントエンド、バック エンド、データエンジニアリング、LLM活用、プロジェクトマネジメントなど、職能を超えて補完し合うスタイルで価値提供を行っています。 ●開発環境 スクラム開発をベースにしつつ、や課題チームに合わせて柔軟に開発サイクルを設計・改善しながら、継続的な価値を提供します。開発対象は、BtoBやBtoBtoBといった多様な形態の中、課題に対して最適な技術を柔軟に取り入れるための最新技術や複数のクラウドに触れる機会が多いです。 プラットフォーム開発・マルチテナント設計、億単位のOLTP・OLAP、PWAやWebScoketなどWeb技術活用、LLM、RAGなど多様な技術を活用し顧客の課題解決につながる開発を進めています 【使用技術の一例】 ・バックエンド:Python, TypeScript, Go など ・フロントエンド:React, Next.js ・データベース:PostgreSQL / MySQL ・インフラ:Google Cloud / AWS / Azure / Snowflake / Terraform ・データパイプライン:DataForm, dbt等 ・コード管理:Github ・バックログ管理:Jira ・コミュニケーション:Google Workspace / Slack / zoom / Microsoft Teams ●活用事例: ・ヘルスケアの事例 　https://jdsc.ai/news/news-3683/ ・LLMの活用事例: 　https://aws.amazon.com/jp/blogs/news/genai-case-study-jdsc/ 　https://jdsc.ai/news/news-5142/ ●働き方 JDSCでは、各メンバーのライフスタイルや価値観に合わせた多様な働き方が実現できます 現在の実績として、出社もしくはリモートを中心として働くことや育休取得、フレックスタイム制度を活用するなどそれぞれの事情に配慮した上で多様な働き方をしている人が多いです。 その他ポジションに関わる福利厚生の一例として以下が挙げられます。創業時代から「まずはやってみる」ということを大切にしている人が多くの結果として以下が実現されています ・書籍購入認証 ・オライリーオンライン ( https://note.com/jdsc/n/n8aced0fb1765) ・Claude、ChatGPT等 LLMの業務利用に対する補助 ・インディングエージェントの補助 ・Google Cloud、AWS証明書の資格取得支援 ・社会人修士・社会人博士支援制度

●業務の概要 データエンジニアとして、様々なデータ関連の業務に関わっていただきます。 データ基盤の構築、データ分析、プロダクト開発、生成AI関連開発など、ご志向やご経験に合わせて幅広い業務に挑戦することができます。 ※社内の配属先はご経験やご希望を踏まえた上でご本人様とご相談しながら決定いたします 【具体的な業務内容】 ・データ基盤の設計、構築、テスト、開発、保守、運用 ・自社プロダクトのデータパイプラインの設計、構築、運用 ・生成AI導入における顧客支援 ●事例 ・自社開発したデータ分析基盤のアセスメントと高度化(三菱地所株式会社) 　https://nowcast.co.jp/case-studies/20240710/ 　https://nowcast.co.jp/news/20260218/ ・ナウキャスト、「Snowflake」を活用し、野村フィデューシャリー・リサーチ&コンサルティングの新たなデータ基盤を構築 　https://nowcast.co.jp/news/20241021/ ・Finatextグループのナウキャスト、ファイナンシャルアドバイザリー業務の効率化を生成AIで支援する「Finatext Advisory Assist」を提供開始 　https://nowcast.co.jp/news/20240419/ ・ニッセイアセットマネジメントの社員発アイデアをもとにした生成AI社内アプリケーションを開発 　https://nowcast.co.jp/news/20240731 ・ナウキャスト、大和アセットマネジメント専用の生成AIアプリケーション「DAM-AICore」を開発 　https://nowcast.co.jp/news/20260107/ ・ナウキャスト、デジタルガレージのグループ横断データ基盤の構築を支援 　https://nowcast.co.jp/news/20260217/ ・ナウキャスト、AIエージェント統制基盤「MCPass」β版を開発 　https://nowcast.co.jp/news/20260417/ ●その他 ・大野(Kevin)が「2026 Snowflake Data Superhero」に選出 　https://finatext.com/hd/news/pYa0o88X ・ナウキャスト、Snowflakeサービスパートナー「Select」に認定 　https://nowcast.co.jp/news/20241022/ ・Snowflakeの「Industry Solution Partner of the Year」を受賞 　https://nowcast.co.jp/news/20250912/ ・Finatextホールディングス、VP of Data & AIに大野巧作 / Kevin が就任 　https://finatext.com/hd/news/20251021 ●こんな経験を活かせます ①データインフラの「ソフトウェア製品化」という潮流の中でソフトウェアエンジニアを通じて培ってこられたのシステム設計・開発スキルが直接活かせる ②マイクロサービス設計の知見をデータメッシュやレイクハウス設計に応用可能 ③TDD/CI/CDの経験をデータパイプラインの自動テスト・品質保証に展開可能 ④DBチューニング経験を活かし、大規模DWH・クエリ最適化・パフォーマンス改善で活躍可能 ③ソフトウェアエンジニア経験で培った論理的思考や可読性・保守性へのこだわりがデータ品質・再現性・スキーマ設計にも直結 ●技術スタック Python、dbt、Airflow、Snowflake、Redshift、Terraform、Vue.js、React、AWS、Google Cloud、Azure

・これまでのデータ分析スキル、専門ノウハウを生かして、製薬業界のお客様の課題やニーズに対し、データ整形、自然言語処理を用いたデータ分析による付加価値ある提案を関係者とまとめ、お客様への提案活動に参画すると共に、プロジェクトをリードする役割を期待しております。 ・リアルワールドデータを用いたデータサイエンティストの活動を通じて、将来は、業務業界知見に基づき、ライフサイエンス領域のコンサルタントとしてお客様の変革プランの策定・実行を推進するポジションへのステップも可能です。 ・アサインメントは、選考を通じて、広く可能性を検討し、配属ポジションを決定させて頂きます。

●業務概要 パーソルグループ企業もしくは提携企業にて顧客や社内の部門に対して、お客様が保有する様々なデータを活用可能な形に処理し、データ分析のための基盤構築をお任せします。 データサイエンティスト/アナリストが行う仕事の基盤をつくり、お客様が抱える課題を解決まで導く業務となります。 ●業務詳細 ・データ収集・連携 　└外部SaaS/業務システムなど異なるソースからのデータ取り込み 　└バッチ開発やストリーミング処理 ・データ基盤の設計・構築・運用 　└DWH・DB・テーブルの設計(SQL、スキーマ、パーティショニング) 　└クラウドインフラの構築(AWS/GCP/Azure)、セキュリティ・ネットワーク設定、コスト最適化 ・データ整備・品質管理 　└ETL/ELTパイプラインの実装(dbt、Apache Kafka、Apache Spark) 　└データモデリング(スタースキーマ・Snowflake)、メタデータ管理、データカタログ整備 ・データ品質監視 　└検査ルール、データガバナンスの設定 　└アラート対応、テスト設計 ・提供・可視化支援 　└分析用マートの提供、BIツールへの接続最適化・可視化(Looker、Tableau、Power BI) ・運用・信頼性 　└パイプラインの監視・障害対応・パフォーマンスチューニング 　└Gitによる変更管理 プロジェクト例 ●Databricksを用いたデータ基盤の設計構築 <業務内容> 　・Databricks上のデータ基盤の設計/構築/検証 　・SAPのテーブルをDatabricksに連携 　・S3のテーブルをDatabricksに連携 　・ストリーミングテーブルの実装、ジョブ作成 <技術> 　Databricks, PySpark, SparkSQL, PowerBI, Git ●dbtを用いたETL、データパイプライン構築 <業務内容> 　・データパイプライン構築、フロー図作成 　・Bigqueryからのデータ抽出、データマートの設計・開発 　・ワークフローの監視 　・バッチ処理開発・運用 　・Tableauダッシュボードの設計・構築・運用 <技術> 　GCP(Bigquery,GCS), dbt, Tableau, Git

ソフトウェアエンジニアとしてデータ基盤・データパイプライン・データ品質を中心に、自社プロダクトおよび顧客向けソリューションを支える開発に関わっていただきます。 実装(バッチ/ワークフロー/IaC)、テストと CI、監視・インシデント対応、スキーマやパフォーマンスの設計などデータエンジニアリングのアウトカムをエンジニアリングの作法で追求する役割です。 データ分析、プロダクト開発、生成AI関連など志向・経験に応じて幅を持たせることも可能です。 ※社内の配属先はご経験やご希望を踏まえた上でご本人様とご相談しながら決定いたします 【具体的な業務内容】 ・データ基盤の設計、構築、テスト、開発、保守、運用(コードレビュー・リリースプロセスを含む) ・自社プロダクト/分析サービスのデータパイプラインの設計、構築、運用 ・生成AI導入における顧客支援(データ接続・ガバナンス・評価基盤など、実装に近い領域) ●事例 ・自社開発したデータ分析基盤のアセスメントと高度化(三菱地所株式会社) https://nowcast.co.jp/case-studies/20240710/ https://nowcast.co.jp/news/20260218/ ・ナウキャスト、「Snowflake」を活用し、野村フィデューシャリー・リサーチ&コンサルティングの新たなデータ基盤を構築 https://nowcast.co.jp/news/20241021/ ・Finatextグループのナウキャスト、ファイナンシャルアドバイザリー業務の効率化を生成AIで支援する「Finatext Advisory Assist」を提供開始 https://nowcast.co.jp/news/20240419/ ・ニッセイアセットマネジメントの社員発アイデアをもとにした生成AI社内アプリケーションを開発 https://nowcast.co.jp/news/20240731 ・ナウキャスト、大和アセットマネジメント専用の生成AIアプリケーション「DAM-AICore」を開発 https://nowcast.co.jp/news/20260107/ ・ナウキャスト、デジタルガレージのグループ横断データ基盤の構築を支援 https://nowcast.co.jp/news/20260217/ ・ナウキャスト、AIエージェント統制基盤「MCPass」β版を開発 https://nowcast.co.jp/news/20260417/ ●こんな経験を活かせます ①データインフラの「ソフトウェア製品化」という潮流の中でソフトウェアエンジニアを通じて培ってこられたのシステム設計・開発スキルが直接活かせる ②マイクロサービス設計の知見をデータメッシュやレイクハウス設計に応用可能 ③TDD/CI/CDの経験をデータパイプラインの自動テスト・品質保証に展開可能 ④DBチューニング経験を活かし、大規模DWH・クエリ最適化・パフォーマンス改善で活躍可能 ③ソフトウェアエンジニア経験で培った論理的思考や可読性・保守性へのこだわりがデータ品質・再現性・スキーマ設計にも直結 ●参考記事 ・ソフトウェアエンジニアからデータエンジニアへ転身して分かった「楽しさ」と「活きるスキル」 https://zenn.dev/finatext/articles/software-engineer-to-data-engineer ・ソフトウェアエンジニアとデータエンジニアの違い・キャリアチェンジ https://speakerdeck.com/mtpooh/swe-vs-de-lt ●技術スタック Python、dbt、Airflow、Snowflake、Redshift、Terraform、Vue.js、React、AWS、Google Cloud、Azure

私たちのチームでは、最先端のAI技術を駆使し、様々な業界のお客様の課題解決に取り組んでいます。 お客様に寄り添い、「作ったら終わり」ではない未来を見据えたシステム開発を通じて、顧客体験や価値を最大化することを目指しています。 AIをどのように活用するかという視点を持ち、 最新のAI技術を用いたデジタルトランスフォーメーション(DX)を推進し、新たな価値創造を実現します。 本ポジションの特徴 ●AI技術を用いたWebシステム開発に携わることができます ●AI関連の実装のみではなく、それ組み込むためのシステム開発全般を行っていただきます ●最新の技術を取り入れた開発に挑戦したい方、「やってみたい」という意欲や得意分野を伸ばしたい方、大歓迎です ●適性や希望を考慮し、最適なポジションをお任せします 具体的には ●主に機械学習や数理最適化プロジェクトを担当いただきます。 ●機械学習モデルの実装のみではなく、それ組み込むためのシステム開発全般を行っていただきます。 適性や得意分野、希望を考慮し、適切なポジションをお任せします。 エンジニア経験のない理工学系または経済学の学士号をお持ちの方や、 エンジニアだけど学識を深め、スキルアップしたい方、 「やってみたい」気持ちや「得意」を伸ばしたい方、大歓迎です! 開発環境 Python AWS(SageMaker, Bedrock, Glue, Athenaなど) 各種機械学習系ライブラリ Docker GitHub 案件例 ●社内用ファイル検索システム 主にAWSが提供するAI系サービスを使用し、社内の業務効率改善に貢献。 設計から実装、テストまでを担当し、AI周りの実装だけでなくインフラの構築や画面の実装も行った。 ●AIチャットアプリ 主にAWSやOpenAIのサービスを使用して新規サービスを構築。 設計から実装、テストまで実施。AI周りの実装だけでなくインフラの構築やAPIの実装などを幅広く担当。 ●土木施工現場の業務効率化 画像解析AIのモデルの開発を担当。 データの収集、解析、モデル作成まで一貫した開発に携わった。 ●建設現場向け危険箇所検知アルゴリズム開発 ●既存システムへのAIレコメンド機能導入 ●商品陳列最適化アルゴリズム開発 ※プロジェクトの規模にもよりますが、基本的に2、3名のチームでアサインを予定しています。 ※客先常駐は原則ありませんが、案件によっては相談させていただく可能性があります。 ※現状、業務に合わせて出社とリモート勤務を臨機応変に対応しています。 【変更の範囲※1】 会社内の全ての業務、客先の業務、将来的に出向を実施した場合は出向先の全ての業務(ただし本人と相談の上で決定します) ※1 「変更の範囲」とは、将来の配置転換などによって変わり得る就業場所・業務の範囲を指します。