データベースエンジニア(Kaggle)の求人・転職情報

ウェルスナビ株式会社

【本ポジションのミッション】 ～10X(10倍の成長)に耐えうる、攻めのデータプラットフォームへの進化～ 現在、当社のデータ基盤は、主軸サービスであるロボアドバイザーがユーザー数45万人・預かり資産1兆9,000億円(2026年2月時点)を突破したことに加え、個人向け金融プラットフォームを目指し、新規事業の多角化により、扱うデータ量と複雑性が飛躍的に増しています。 単なるデータの蓄積や可視化に留まらず、10倍のデータ量や多様なステークホルダーの要望を先回りして解決する、スケーラブルなデータプラットフォームへと再構築することがミッションです。自ら課題を抽出し、技術で事業成長を加速させる攻めのデータエンジニアリングを作る仲間を募集しています。 【業務内容(期待する役割)】 ●データ基盤・パイプラインの設計と構築 ・AWSとGCPを跨ぐクロスクラウド環境において、セキュリティを考慮した権限設計および安全なデータ連携・受け渡しの仕組みの設計・構築 ・Airflow等のワークフロー管理ツールを用いた、Pythonによるメンテナンス性・可読性の高いデータパイプライン(DAG)の開発 ●事業要件に基づくデータモデリング・システム設計 ・事業チームと密にコミュニケーションを取り、分析要件をシステム仕様へ落とすコミュニケーション ・データ利用者にとって理解しやすく、かつや運用負荷を考慮した、持続可能なデータモデリングの設計・実装 ●データマネジメントの確立とセキュリティ・信頼性の担保 ・Knowledge Catalog等のデータカタログを活用したメタデータ管理と、データ品質チェックパイプラインの組み込み・自動化 ・金融機関に求められるセキュリティ(機密データの精査、アクセス権限設計等)の考慮、障害監視、およびパイプラインの依存関係の整理・最適化による高可用なシステム設計 ●パフォーマンス最適化とアーキテクチャ改善 ・今後の急激なデータ量増大を見据えた、各種マネージドツールのスケールアップ・バージョンアップ、およびパイプライン全体のボトルネック解消 ・ビジネスの拡大に合わせた、最適なツールやアーキテクトの選定・検証および移行計画の策定と実行 【データ基盤を強くするために今後取り組みたいこと】 ●データカタログの導入 ・複数プロダクト投入前にカタログの運用フローを固める ・AI Readyなデータ基盤の実現 ●複数プロダクトデータの投入 ・事業ごとのデータソースの違い ・個人情報のリスク ・分析したいKPIの定義 ・関連ツール(CRM・MA)のマルチプロダクト化 ●アーキテクトの強化 ・マネージドツールのバージョンアップ戦略 ・デジタルバンク開業による、データ増大への対応 ・データの連携処理の見直し ・全量洗い替え処理の改善 ・データ処理時間の削減・コスト対策 【技術スタック】 ・DWH:BigQuery ・インフラ:AWS, GCP ・IaC: Terraform ・ワークフローエンジン:Apache Airflow ・ETL: Amazon Appflow ・使用言語:SQL, Python など 【働き方】 弊社はフレックス制(コアタイム:10:00〜16:00)のハイブリット型の勤務形態で、週2日リモート可能です。 労働時間の清算期間は月単位(=営業日数×8時間を月単位で担保いただく)となるため、コアタイムを中心とし、柔軟に就業できます。 またチーム内には小さいお子様がいる社員もいるため、何かあった際に相談しやすい環境です。

三井住友カード株式会社

三井住友カードは、決済プラットフォーム「stera」を核に、決済と連動した新たな付加価値サービスを事業者様へ展開しています。 SMBCグループのキャッシュレス戦略の中核を担う内製開発組織として、2025年4月に「steraエンジニアリング室」を新設いたしました(2026年4月に「デジタルステーション部」へ組織名称変更)。 事業者様の視点に立ち、プロダクト開発を通じて体験価値を最大化することが私たちのミッションです。 立ち上げ期を経て現在は、約40名のプロフェッショナルが集まる組織へと急成長を遂げました。 グローバルリーダーとの戦略的業務提携による共同開発プロジェクトも本格化しており、決済の枠を超えた新たな価値創造に挑戦するエンジニアを募集しています。 【職務詳細】 ・Goを用いた決済システムのバックエンド開発 ・マイクロサービスアーキテクチャに基づく設計・実装 ・決済データの整合性を担保するためのDB設計および最適化 ・AIツールを駆使したプロダクト開発の効率化 【開発環境】 -バックエンド:Go -モバイル:Kotlin, Jetpack Compose -インフラ:AWS, Docker, Terraform, Datadog -データベース:PostgreSQL -CI/CD:GitLab CI/CD, AWS CodeDeploy -開発ツール:GitLab, Visual Studio Code, Android Studio, Claude Code 等 ※業務用端末(Windows)とは別途、開発用の端末はMacBook Proを貸与

パーソルクロステクノロジー株式会社

●業務概要 パーソルグループ企業もしくは提携企業にて顧客や社内の部門に対して、お客様が保有する様々なデータを活用可能な形に処理し、データ分析のための基盤構築をお任せします。 データサイエンティスト/アナリストが行う仕事の基盤をつくり、お客様が抱える課題を解決まで導く業務となります。 ●業務詳細 ・データ収集・連携 　└外部SaaS/業務システムなど異なるソースからのデータ取り込み 　└バッチ開発やストリーミング処理 ・データ基盤の設計・構築・運用 　└DWH・DB・テーブルの設計(SQL、スキーマ、パーティショニング) 　└クラウドインフラの構築(AWS/GCP/Azure)、セキュリティ・ネットワーク設定、コスト最適化 ・データ整備・品質管理 　└ETL/ELTパイプラインの実装(dbt、Apache Kafka、Apache Spark) 　└データモデリング(スタースキーマ・Snowflake)、メタデータ管理、データカタログ整備 ・データ品質監視 　└検査ルール、データガバナンスの設定 　└アラート対応、テスト設計 ・提供・可視化支援 　└分析用マートの提供、BIツールへの接続最適化・可視化(Looker、Tableau、Power BI) ・運用・信頼性 　└パイプラインの監視・障害対応・パフォーマンスチューニング 　└Gitによる変更管理 プロジェクト例 ●Databricksを用いたデータ基盤の設計構築 <業務内容> 　・Databricks上のデータ基盤の設計/構築/検証 　・SAPのテーブルをDatabricksに連携 　・S3のテーブルをDatabricksに連携 　・ストリーミングテーブルの実装、ジョブ作成 <技術> 　Databricks, PySpark, SparkSQL, PowerBI, Git ●dbtを用いたETL、データパイプライン構築 <業務内容> 　・データパイプライン構築、フロー図作成 　・Bigqueryからのデータ抽出、データマートの設計・開発 　・ワークフローの監視 　・バッチ処理開発・運用 　・Tableauダッシュボードの設計・構築・運用 <技術> 　GCP(Bigquery,GCS), dbt, Tableau, Git