分析基盤エンジニアの案件一覧

在庫管理数が多く、データ分析等に追加で自走可能なメンバーが現場で必要になっている状況になります。
期間としては長期で1～3年想定。多少時間がかかっても良い方にアサインいただきます。
また、業務実践による業務回復（商品部・需給）、計画業務の策定・型化（グローバルテンプレート）、
業務実践・計画業務を下支えするシステム・DWH/DM構築も業務の中に含まれてくる想定になります。

AWSインフラ環境でのデータプラットフォーム保守作業
└弊社メンバーと共に、運用保守「障害対応、ユーザ問い合わせ対応、リリース作業等」を実施して頂きます。
　ETLツールとしてTalendを使用しております。
　ソースはJavaで書かれております。

データ基盤全体のアーキテクチャ設計から、ガバナンス設計（Unity Catalogなど）、dbtやワークフローの設計・運用、GitHubを活用した開発プロセスの整備まで、プロジェクト全体をリードする役割になります。

【想定内容】
・全体アーキ設計：3層（着地／精錬／提供）の責務分離、命名規約、スキーマ進化方針、データ契約の策定
・ガバナンス設計（必須）：Unity Catalog 等を用いた権限モデル、監査・データ分類、変更管理プロセスの整備
・dbt：プロジェクト構成（stg/int/mart）、モデル分割、tests とドキュメントの整備、依存グラフ設計
・Databricks：Lakehouse 基盤設計、ジョブ／ノートブックの責務分離、再実行・冪等性設計
・ワークフロー：依存制御・スケジューリング、失敗時の復旧方針、SLA/アラート、可観測性（メトリクス／ログ／リネージ）
・GitHub：ブランチ戦略、PR レビュー基準、CI（dbt build・lint 等）とリリース運用
・移行設計：Snowflake＋Xplenty → Databricks＋dbt の段階移行（Dual-run、差分検証、カットオーバー、ロールバック）

・データマート構築
・データ抽出／集計
・ダッシュボード構築

【開発環境】
・言語：SQL、LookML
・ツール：GitHub、Slack、Confluence
・データ基盤：BigQuery
・BIツール：Looker
・開発マシン：Windows or Mac（どちらか選択）

【担当工程】
・プロジェクト進行
・案件定義
・基本設計
・詳細設計
・開発※クエリ作成/レポーティング
・保守改修

ETLツールを用いたアプリケーションの保守対応をお任せします。既存システムの安定稼働を支え、必要に応じて改善提案も行っていただきます。チームの一員として業務を進めていただく形となります。

・既存システムのキャッチアップ
・データ分析基盤の保守開発

精密機器製造・販売メーカ様において、経営目標を達成するためのモニタリング・分析を可能にすることを目的に膨大なデータから、価値ある情報を迅速に提供する仕組みを構築しているPJTになります。

【役割】
今回は顧客直営に代わってシステム基盤のアーキテクトとして
下記業務を対応頂きます。

◼システムリソースに関連する課題の抽出・整理
◼システムリソースの利用状況の調査・分析から打つべき手の検討・提案
　–直近①：Databricksを活用したIF連携基盤の検証・本番化
　–直近②：ECS等のコンテナ関連サービス群を活用したWebアプリケーション(Python中心)の検証・構築
　–直近③： Snowflakeを活用したDM作成基盤の検証・構築
◼システムリソースの利用状況を監視する仕組みの検討・実装
◼必要に応じて、システム構成の見直し、アーキテクチャ検討
◼上記に関する進捗報告・課題検討・進め方すり合せについて、チーム内・対顧客とのコミュニケーション

グループ会社で既に導入済みのクラウドデータウェアハウス Snowflake を活用し、お客様が求めるアウトプットを効率的に導き出すためのデータ基盤を構築するプロジェクトです。

具体的には、Snowflake と Amazon S3 に格納された各種データを整理・統合し、ビジネスニーズに合致したデータマートの設計および構築を推進いただきます。これにより、お客様が迅速かつ正確にデータ分析を行い、意思決定に繋げられるよう、データ活用を強力に支援します。