データエンジニアの案件一覧

元請けプロパーチームに参画し下記作業を実施。

・クライアントの業務要件・課題を理解し、Power BIを駆使したソリューションを提案
・Power BIを活用したダッシュボード・レポートの設計・開発・運用
・会計データを中心としたデータモデルおよびレポートの設計、最適化
・SnowflakeやSQLデータベースからのデータ取得・変換・統合
・データ品質管理、モニタリングシステムの導入
・プロジェクト進行におけるBI環境におけるクライアントとのコミュニケーション、課題解決のリード
・グローバルメンバーと協力し、プロジェクト目標の達成に向けてタスクの遂行

・BIツールに関する実務経験：5年以上
・Power BIに関する実務経験：3年以上
・Power BIを用いたダッシュボード・レポート開発経験
・データモデリングおよびDAXの知識
・SQLおよびPythonの使用経験
・データウェアハウスの利用経験
・クライアント課題のヒアリング・要件定義の経験
・国際的な環境での業務経験、優れたコミュニケーション能力（英会話が堪能であれば尚可）

元請けプロパーチームに参画し下記作業を実施。

•クライアントの業務要件・課題を理解し、Snowflakeを駆使したソリューションを提案
•Snowflakeを活用したデータウェアハウスの設計・開発・運用
•会計データを中心としたデータウェアハウスおよびデータモデルの設計、最適化
•ETLパイプラインの構築・保守
•SQLデータベースやERPなど複数ソースからのデータ統合・変換
•データ品質管理、モニタリングシステムの導入
•Snowflakeのパフォーマンスチューニング
•プロジェクト進行におけるデータウェアハウス環境におけるクライアントとのコミュニケーション、課題解決のリード
•グローバルメンバーと協力し、プロジェクト目標の達成に向けてタスクの遂行

※英語に抵抗がない方　英会話堪能だと尚可

データエンジニアとしてデータモデルの設計・開発
事業企画との折衝、主には実現方法の検討であったり連携項目の整理といったレポートで表現するにあたっての要件定義

【対応工程】
・BI レポート用のデータマートの設計・開発
・テーブル設計、SQL実装、リレーション構築、バッチ実装
・BI レポートの開発・保守運用
・レポート開発にあたっての要件定義
・実現方法検討、連携項目整理
　※現在PowerBIとTableauを併用しています

【開発環境】
データベース：Databricks、Snowflake
BIツール：Power BI、Tableau

既存のTableau環境に対しDatabricksを追加採用し、社内外データを一元的・効率的に管理できる統合データ基盤を構築するプロジェクトになります。

現状：Tableau (BIツール) のみ導入済み。
構築対象範囲：
・Databricksデータ基盤環境の追加構築。
・データレイク、DWH（データウェアハウス）の統合。
・周辺のデータ準備処理およびワークフローの整備。
主要業務: データパイプラインの設計・構築

・大規模データ基盤構築プロジェクトにおける構築実務経験
（データ設計／データパイプライン処理実装等）
・Pythonを使用したデータ分析などのご経験
・自主的・積極的な業務推進

主にマルチクラウド環境（AWS/GCP）のデータ基盤構築と整備、およびデータ活用のための前処理開発を担当いただきます。

データ基盤構築・統合:
現在AWSとGCPに分散しているデータ基盤を、BigQuery上への統合（一元化）を目指す構築作業が主。
データベース型サイト（5〜10サイト、大規模データ）の分析基盤の設計、保守、セキュリティ対策。

データパイプライン開発:AWSとGoogle Cloudの両方からデータを接続するデータパイプラインの設計・実装。
データソース（アクセスログ、AWS S3上のマスターデータ等）の接続設定。

データ前処理・加工（データマート構築）:
データ抽出、グルーピング、定義付けなど、分析用データマートの部分の加工・実装。

運用・保守:
構築後のメンテナンス費用やセキュリティまで考慮した管理体制の提案・構築。
フェーズ: プロジェクトはこれから始まる段階（現時点では知見の少ないメンバーで対応中）。

ELTについて:
Google Cloud内の機能でELTを内製
データ抽出：SQL
変換：SQL or Python
格納：BigQuery