データ基盤／DWHの案件一覧

金融機関のデータ分析基盤構築プロジェクトにおいて、構築担当のエンジニアを募集しております。
【役割】
データ分析基盤構築エンジニア

– データ連携要件の調整（顧客・外部接続先担当者とデータ項目/連携方式/更新タイミングの打ち合わせができること）
– インフラ/セキュリティ基礎（クラウド環境（AWS/GCP/Azure等）の基礎知識（アクセス管理、仮想ネットワーク、セキュリティグループ、機密情報管理、認証基盤/MFA/SAML/ディレクトリサービス連携））
– テスト・運用設計（結合/性能/障害テストの実施、および監視設計の経験）
– データ基盤構築（クラウド環境（AWS/GCP/Azure等）上でのデータレイク/クラウド型データ倉庫の設計・構築経験）
– データ統合/データ処理（オブジェクトストレージ、分散データ処理基盤、クラウド型データ倉庫、サーバーレス実行環境を用いた処理基盤の設計・開発）
– データ管理・ガバナンス（オープンテーブルフォーマット、アクセス制御・ガバナンス管理機能、データカタログ機能）の実務経験
– データ定義・品質、CSV等のファイル連携、スキーマ定義データ品質確認の経験
– 【SQL】データ抽出・集計・加工、SQLの性能チューニング経験
– 【Python】バッチ処理、データ統合、ファイル加工、運用ツール等の開発経験

士業向け業務アプリケーションを展開する事業者にて、データ活用基盤チームの立ち上げを支援します。
データ集約基盤の設計、データ連携フロー整備、分析基盤運用、データマート設計、データ管理体制構築、将来的なAI活用基盤への拡張までを担うポジションです。
基幹・会計データの経営判断向け活用基盤への移行フェーズとなります。

– クラウド型データ倉庫・データ集約基盤の設計・構築・運用経験
– SQLによるデータ加工・分析経験（高度なクエリ設計含む）
– Pythonによるデータ処理・分析経験（各種データ分析ライブラリ等）
– データ統合・パイプライン構築ツールを用いた開発経験

• クラウド環境（AWS/GCP/Azure等）上に、プラントの分散データ（RDBMS・ファイル等）を統合する基盤をゼロから構築します
• 決まった仕様を作るのではなく、現場ヒアリングで要件を形にしていくフェーズから伴走いただきます
• 機能単位で設計〜実装〜テストまで一貫してお任せします
  ■ プロジェクト背景・目的
  現場の日報・分析値・在庫データが部署ごとに各種ファイルや基幹DBに分散しており、月次集計に多くの工数がかかっている。
  これらを統合基盤に集約し、BIツールなどで即時に確認できる状態にすると共に、AIなどのより高度な活用を見据えた基盤を整える。
  ■ 担当業務
  主担当（稼働の大半）
• クラウド環境（AWS/GCP/Azure等）上のデータ基盤／データマートの構築
• データ取り込み処理の実装（連携元：RDBMS／ファイル等）
• データマートからのファイル出力機能の実装
• BIツールでの可視化画面（レポート・ダッシュボード）の実装
  併せてお願いする業務
• 実ユーザーへの要件ヒアリング
• リリース作業、稼働後のモニタリングおよび課題対応
• 既存資料をベースにしたトレーニング資料の作成、ユーザーへのレクチャー支援
  進め方
  機能単位でアサイン → 現場担当者へのヒアリング → 設計 → 実装 → テストまで一貫して担当いただきます。
  週次の定例で進捗・課題をご自身から報告いただく形です。
  各種作業については支援ツールによる開発を進めます。
  ■ 技術環境
• クラウド：AWS/GCP/Azure等（分析サービス／RDBMS／サーバーレス実行環境／ストレージ／仮想マシン）
• データソース：RDBMS、各種ファイル
• BI：分析ツール
• 言語：SQL／Python
  ■ 体制・働き方
• 募集人数：1名
• 体制：PM1名／リーダー1名／開発メンバー3名(予定)
• 報告ライン：週次定例＋チャットツールで随時
• 稼働場所：原則リモート（在宅）。打合せはWeb会議
• 出張：東京都内または岐阜県内へ月1回程度／宿泊を伴う出張の可能性あり／出張費実費支給

– 指示された機能単位で、設計〜実装〜単体テストまで逐次フォローなしに完遂できること（システム開発またはデータ基盤構築の実務経験3年以上が目安）
– SQLでの中程度のデータ加工経験（複数テーブル結合／集計／ウィンドウ関数）
– 業務ユーザーへの直接ヒアリング経験（要件が固まっていない状態からの整理を含む）
– 進捗・課題を定例で自ら報告し、遅延やリスクを早期にエスカレーションできること

部品を主力に取り扱う製造事業者での事業管理高度化支援。
並行して進む基幹システムの刷新とは別に、現状システム環境で利用可能なデータを用いて目指すべき事業管理像に近づけていく
事業管理高度化の企画案に対して、データによる検証を行い有効性を確認する部分が主なタスク
データの抽出自体はシステム部門が行い、抽出されたデータをBIツールによって加工・分析を行う
なお、可視化画面の構築や実運用環境での連携構築等は対象外

– 大量データの分析スキル（データ整形・加工・テーブル結合等も含む）
– BIツールないしはPython等によって自身で分析した経験
– 事業管理系の評価指標に関する知識

データエンジニア / インフラエンジニア
専門性や強みに応じた業務を担当します。

概要：
横断的な組織として、事業部門と連携しながらデータ基盤の構築・運用を担当するチームです。
事業部門側に払い出すクラウドプロジェクトの管理を行い、事業部門のデータはオンプレミスサーバー上に存在します。
セキュアで信頼性が高く、自動化されたデータ基盤構築および共通基盤の実現を目指します。

構築対象の主要なサービス:
・共通

• アクセス制御
• クラウドストレージ
• RDBMS
• コンテナ実行環境
• サーバーレス処理
• コンテナリポジトリ
• ジョブスケジューラ
• メッセージング
• 仮想サーバー
• 秘密情報管理
• 監視ツール
• ログ管理

・データエンジニア

• DWH

・インフラエンジニア

• コンテナオーケストレーション
• セキュリティ管理
• ネットワークセキュリティ
• ネットワーク接続サービス

※AI開発支援ツールや自動化ツールがチーム内の共通ツールです。
拡張機能連携ツールやドキュメント管理ツール等が使用可能で、業務に必要な文章にアクセスできる環境です。
コード管理はCLIコマンド経由で利用可能です。

●クラウド環境（AWS/GCP/Azure等）の実務経験
・共通
– クラウドプロジェクト作成および適切なアクセス制御設定
– CI/CDを実践しての運用業務効率化
– CLIコマンドでのクラウド環境の操作
・データエンジニア
– DWHを用いてのデータ基盤の構築
– ワークフローエンジンを利用したパイプライン処理の構築
・インフラエンジニア
– コンテナ技術でのワークロード構築および継続的な運用改善経験
– セキュリティ境界設計および構築(参画後のキャッチアップも可)

●Infrastructure as Code (IaC)の実務経験
・クラウド環境のリソースを対象にしてのIaCツールでの構成管理経験
・コンテナ技術の実務経験

以下は職種に応じていずれかが必要
●データエンジニア
・データ基盤（DWH等）の概念の理解とDWHおよびクラウドストレージを利用しての構築・運用経験
・データ変換ツールを活用したデータパイプライン構築・運用経験
・オーケストレーションツールの構築経験
・各種データ転送・ワークフローツールの利用経験
・SQLの読み書き（特定DWH特有の構文に習熟していると尚可）

●インフラエンジニア
・コンテナ実行環境上でのワークロード運用経験（セキュリティやネットワークポリシー設計の理解）
・パッケージマネージャーを用いたアプリケーションのデプロイ・管理経験
・権限分離によるコンテナからリソースへのアクセス権限設計経験
・CI/CDパイプラインからのコンテナデプロイ自動化経験
・各種管理ツールを用いたトラブルシューティング経験