分析基盤エンジニアの案件一覧

・金融分野のデータ統合・利活用プロジェクトにおける、データクレンジング・収集に伴うバッチ作成（データ分析基盤周りでの対応）
・メンバー枠としての開発・運用実務対応

– データ分析基盤周りにおける、データクレンジング・収集に伴うバッチ作成の経験（※アプリ側ではなく基盤側の経験）
– 特定のデータ分析プラットフォームの構築・利用経験

インフラサービス展開企業にて、スマートメーターから取得する大量データの可視化エラーを解消するプロジェクトです。クラウドデータプラットフォームを用いて効率的なデータ加工を行い、新たにデータマートを構築して可視化ツールとの連携を最適化していただきます。

◆主な業務内容

• 課題解消に向けた、Snowflake上での大量データの加工・処理
• 可視化ツールで円滑に読み込めるようにするためのデータマートテーブルの新規設計・作成
• 名古屋および大阪の拠点（出張対応を含む）でのオンサイト業務および関係者調整

– SQLを用いた実務経験
– データベースでのデータ加工・データ処理技術
– 各種調整や連携を円滑に行えるコミュニケーション能力
– 名古屋および大阪の双方の拠点への行き来（出張・直行直帰等）が対応可能な方

サポート終了を迎える物理サーバー環境からパブリッククラウド環境へシステムを移転するプロジェクトです。現行の運用機能（自動実行管理、データ連携・変換、データ蓄積基盤）をクラウドの提供する各種マネージドサービスへ刷新する方針に沿って、調査、移行設計、実装、検証から移行作業までを一貫して担当していただきます。

■業務内容

• 既存環境（自動実行定義、データ連携処理、データベース資産）の調査と移行プロセスの策定
• クラウド移行先サービスの選定および構成設計
• 自動実行ジョブ、データ連携処理、データ蓄積用の構造定義に関する移行設計および実装
• データの初期移行および差分同期に関する設計と実行
• 検証計画の策定、および各種テスト（結合・性能・受入）の推進
• 本番移行計画の立案、移行作業の遂行、および運用プロセスの設計と引き継ぎ
• 複数の関連部門や外部パートナーとの連携、進捗管理および課題解決の推進

– 物理環境からパブリッククラウド環境への移行プロジェクトにおける設計から本番稼働までの実務経験
– 自動実行管理システム（ジョブスケジューラ等）の運用または移行に関する実務経験
– データ連携・変換を行うETLツールを用いた開発または移行に関する実務経験
– 大規模データ蓄積基盤（DWH等）の設計または移行に関する実務経験
– クラウド環境における各種インフラサービスやマネージドサービス（オブジェクトストレージ、アクセス権限管理、ネットワーク、データ処理等）の実務経験
– 複数の関係者との調整や課題管理を主体的に推進できるコミュニケーション能力

• 金融機関における決算業務（国内基準および国際会計基準）の自動化を目指すプロジェクトです。
• 現在、国内基準向けのシステムはテストフェーズにあり、並行して国際基準対応の仕組みを新規に立ち上げます。
• 大量データを効率的に処理するためのETL処理を実装し、後続の各システムへデータを橋渡しする仕組みの設計から開発までを担います。

◆開発環境の傾向

• インフラ: AWS環境（AWS Glue, Amazon Redshift等）を活用したデータ基盤
• アプリケーション: Pythonを用いた開発、およびPySparkによる大規模データ分散処理

– ETL開発経験、Python

• 組織横断で利用されるデータサービスの改修および最適化を支援します。
• 既存のワークフロー管理環境からManaged Airflowへの移行作業を主導します。
• 分析に必要となるデータの調達から、システムの実装・リリース、提供後の運用・保守までを一貫して担当します。

◆主な業務内容

• データベースの操作およびApache AirflowからManaged Airflowへの移行対応
• データパイプラインの実装、リリース、および運用保守業務

– SQLを使用した業務経験
– Webシステム開発経験（Pythonだと尚可）
– コミュニケーション力

Microsoft Fabricを用いたデータ分析基盤の構築およびデータ処理開発
・Microsoft Fabric（Lakehouse／Data Factory／Notebook）を用いたデータ基盤構築
・Pythonによるデータ加工・ETL処理の開発
・データパイプラインの設計・実装
・Power BIとの連携によるデータ可視化支援
・既存データ基盤の改善・運用支援

・Microsoft Fabricの利用経験
・Pythonを用いたデータ処理開発経験
・SQLを用いたデータ抽出・加工経験
・クラウド環境（Azure／AWS／GCPいずれか）での開発経験
・データ基盤またはETL開発経験

Snowflakeを用いたデータ取込み処理・ELT処理・データマート作成
・ETL処理の開発
・単体テスト～総合テスト
※Phase2（6月以降）ではAWS連携対応の可能性あり

・Snowflake（Snowflake SQL・Snowpipe・Task・Copy into等の連携処理経験）※1年以上の経験が望ましい
・ETL／ELTの実装経験
・ストアドプロシージャの経験
・詳細設計～STまでの経験
・Python読解経験（既存処理がPythonのため）

SAPからSQLServer、Databricks、Synapseへのシステム移行およびデータ移行作業をご担当いただきます。
2027年の本番稼働に向けたリハーサル作業、課題検討、移行ツールの開発、本番移行対応が主な業務です。
移行作業の閑散期には、通常の開発・保守作業をサポートいただく場合もございます。

DWHシステムの改修業務。他グループ会社のデータとの突合（名寄せ）対応を実施。

・DWHの構築または保守経験

化学品メーカーDWH/BI移行対応案件

■環境：
＜現環境＞
ソース：SAPECC6.0orスクラッチ
DWH：Oracle
BI：Jasper
ETL：Talend

＜新環境＞
ソース：S/4HANAorスクラッチ
DWH：AmazonRedshift
BI：AmazonQuickSight
ETL：Zero-ETL＋PL/SQL（ストアドプロシージャ）