非公開求人
Data Platform Engineer/上場スポットコンサル運営企業の求人
求人ID:1566849
更新日:2026/11/16
転職求人情報
職種
Data Platform Engineer
ポジション
担当者〜
おすすめ年齢
20代
30代
40代
50代以上
年収イメージ
700万円〜1,200万円
仕事内容
検索・分析・コンプライアンス判定といった多様な用途を支えるデータ基盤についてアーキテクチャ設計から、エンティティ解決(名寄せ)を含むデータクレンジング、そして品質を維持し続ける仕組みづくりまでの一連のフェーズをリードいただきます。
【業務詳細】
データ基盤のアーキテクチャ設計
・複数プロダクトおよび複数クラウド(Azure/GCP)にまたがるデータを、AIプロダクト・検索・分析・コンプライアンス判定のそれぞれが信頼して使える形に整備する設計
・信頼できる唯一の情報源(SSOT)をどこに置くか、信頼度(confidence)のデータモデルへの組み込みなど、実測データに基づく設計判断
エンティティ解決とデータクレンジングの実装・運用
・決定的キーによる照合、スコアリング、人手レビューを組み合わせた多段構成での名寄せパイプラインの設計・実装
・同じ処理を何度実行しても結果が変わらない設計(冪等性)や、問題が起きた際に元の状態に戻せる設計を含む、品質を維持し続ける仕組みとしてのデータクレンジングの構築
・パイプラインの安定稼働のための監視体制構築、およびエラー・異常検知時の対応
データ品質の調査と改善提案
・データ品質問題の調査と根本原因の特定
・事業インパクトに基づく解決策の立案
技術的意思決定とステークホルダー折衝
・設計や調査結果の文書化(設計ドキュメント、調査レポート、ADR等)
・CTO・プロダクトチーム・グローバルチームとの合意形成の主導
●開発環境
【ENS開発共通】
- プログラミング言語: C#, Python, Typescript
- バックエンドフレームワーク: ASP.NET Core, FastAPI
- フロントエンドフレームワーク: Angular
- インフラ:Microsoft Azure, Google Cloud Platform
- データベース:SQL Server, Cosmos DB
- コミュニケーション: Slack, Google meet,Jira
- ドキュメント管理: esa, Confluence,
- AIツール: Claude Code, Devin, ChatGPT
【Data Platform Engineer】
Azure Data Factory
Microsoft Power BI
BigQuery
【業務範囲について】
雇入れ直後:本求人の業務内容に記載の業務
変更の範囲:当社における各種業務全般
【業務詳細】
データ基盤のアーキテクチャ設計
・複数プロダクトおよび複数クラウド(Azure/GCP)にまたがるデータを、AIプロダクト・検索・分析・コンプライアンス判定のそれぞれが信頼して使える形に整備する設計
・信頼できる唯一の情報源(SSOT)をどこに置くか、信頼度(confidence)のデータモデルへの組み込みなど、実測データに基づく設計判断
エンティティ解決とデータクレンジングの実装・運用
・決定的キーによる照合、スコアリング、人手レビューを組み合わせた多段構成での名寄せパイプラインの設計・実装
・同じ処理を何度実行しても結果が変わらない設計(冪等性)や、問題が起きた際に元の状態に戻せる設計を含む、品質を維持し続ける仕組みとしてのデータクレンジングの構築
・パイプラインの安定稼働のための監視体制構築、およびエラー・異常検知時の対応
データ品質の調査と改善提案
・データ品質問題の調査と根本原因の特定
・事業インパクトに基づく解決策の立案
技術的意思決定とステークホルダー折衝
・設計や調査結果の文書化(設計ドキュメント、調査レポート、ADR等)
・CTO・プロダクトチーム・グローバルチームとの合意形成の主導
●開発環境
【ENS開発共通】
- プログラミング言語: C#, Python, Typescript
- バックエンドフレームワーク: ASP.NET Core, FastAPI
- フロントエンドフレームワーク: Angular
- インフラ:Microsoft Azure, Google Cloud Platform
- データベース:SQL Server, Cosmos DB
- コミュニケーション: Slack, Google meet,Jira
- ドキュメント管理: esa, Confluence,
- AIツール: Claude Code, Devin, ChatGPT
【Data Platform Engineer】
Azure Data Factory
Microsoft Power BI
BigQuery
【業務範囲について】
雇入れ直後:本求人の業務内容に記載の業務
変更の範囲:当社における各種業務全般
必要スキル
●応募資格(必須)
・データエンジニアリング/大規模データパイプライン・DWH設計構築運用の実務経験
・リレーショナルデータベースの実務経験(実行プラン分析、インデックス設計、大規模データのバッチ処理など)
・コードと実データを突き合わせた根本原因調査の実務経験(障害調査、データ不整合の解明、パフォーマンス問題の特定など)
・技術的な設計や調査結果を文書化し、それをもとに合意形成した経験(設計ドキュメント、調査レポート、ADRなど)
・バックエンド言語での開発実務経験
・日本語での業務遂行能力(ネイティブレベル)
●応募資格(任意)
- 英語での読み書き・コミュニケーション(グローバルチームとの協働があります。翻訳サポートの体制はあります)
- LLM・RAG・検索システムなど、AIプロダクトのデータ供給側に関わった経験
- マスタデータ管理(MDM)、名寄せ・レコードリンケージ、データ品質管理の経験
- 複数データソースの統合・マスターデータ基盤の構築プロジェクトをリードした経験(スキーマ統合、ID体系の設計、strangler方式などによる無停止での段階的移行、参照システムの切り替え計画)
- 分散システム間のデータ同期(イベント駆動とバッチの併存環境)での開発・デバッグ経験
- 決済・医療・認証・コンプライアンスなど、正しさが強く要求されるドメインでの設計経験
- SQL Server / Azure(AKS, Data Factory)/ GCP(BigQuery, Cloud SQL)の経験
- レガシーシステムの調査・段階的移行の経験
●こんな人に仲間になってほしい
・実データと向き合い、答えのない設計判断を楽しめる方
表面的な動作確認では満足せず、データの矛盾や違和感を最後まで追いかけて根本原因に到達し、教科書に正解がない中でも実測データに基づいて仮説を立て、意思決定できる方
・技術と事業をつなげて考えられる方
データ品質の改善を、マッチング率やコンプライアンスリスクという事業の言葉で語れる方
・仕組みとして品質を維持する発想を持てる方
一度きりの対応で終わらせず、データが増え続ける中でも機能し続ける「機構」として設計できる方
・意思決定者を巻き込みながら進められる方
設計や調査結果を文書化し、CTOやグローバルチームを含めたメンバーとの合意形成を自ら主導できる
・データエンジニアリング/大規模データパイプライン・DWH設計構築運用の実務経験
・リレーショナルデータベースの実務経験(実行プラン分析、インデックス設計、大規模データのバッチ処理など)
・コードと実データを突き合わせた根本原因調査の実務経験(障害調査、データ不整合の解明、パフォーマンス問題の特定など)
・技術的な設計や調査結果を文書化し、それをもとに合意形成した経験(設計ドキュメント、調査レポート、ADRなど)
・バックエンド言語での開発実務経験
・日本語での業務遂行能力(ネイティブレベル)
●応募資格(任意)
- 英語での読み書き・コミュニケーション(グローバルチームとの協働があります。翻訳サポートの体制はあります)
- LLM・RAG・検索システムなど、AIプロダクトのデータ供給側に関わった経験
- マスタデータ管理(MDM)、名寄せ・レコードリンケージ、データ品質管理の経験
- 複数データソースの統合・マスターデータ基盤の構築プロジェクトをリードした経験(スキーマ統合、ID体系の設計、strangler方式などによる無停止での段階的移行、参照システムの切り替え計画)
- 分散システム間のデータ同期(イベント駆動とバッチの併存環境)での開発・デバッグ経験
- 決済・医療・認証・コンプライアンスなど、正しさが強く要求されるドメインでの設計経験
- SQL Server / Azure(AKS, Data Factory)/ GCP(BigQuery, Cloud SQL)の経験
- レガシーシステムの調査・段階的移行の経験
●こんな人に仲間になってほしい
・実データと向き合い、答えのない設計判断を楽しめる方
表面的な動作確認では満足せず、データの矛盾や違和感を最後まで追いかけて根本原因に到達し、教科書に正解がない中でも実測データに基づいて仮説を立て、意思決定できる方
・技術と事業をつなげて考えられる方
データ品質の改善を、マッチング率やコンプライアンスリスクという事業の言葉で語れる方
・仕組みとして品質を維持する発想を持てる方
一度きりの対応で終わらせず、データが増え続ける中でも機能し続ける「機構」として設計できる方
・意思決定者を巻き込みながら進められる方
設計や調査結果を文書化し、CTOやグローバルチームを含めたメンバーとの合意形成を自ら主導できる
就業場所
就業形態
正社員
企業名
日本最大級のナレッジプラットフォーム運営企業
企業概要
日本最大級のナレッジプラットフォーム運営企業
企業PR
業務カテゴリ
組織カテゴリ
備考
応募ありがとうございました。コンサルタントからご連絡します
応募出来ませんでした。恐れ入りますがもう一度やり直してください
気になるに登録しました
気になるに登録出来ませんでした。恐れ入りますがもう一度やり直してください