データエンジニアの案件一覧

プロジェクトリーダー候補として、データ分析基盤の構築～運用、展開、改善に関するエンジニアリング全般をご担当いただきます。
全社～プロジェクト別でのデータ分析業務、KPIマネジメント、アナリスト業務の支援を行っていただく想定です。

・データ分析基盤の設計/開発/運用、パフォーマンス改善をアジャイルプロジェクトにて実行
・AI～分析基盤・ビジネス・インテリジェンス運用支援
・プロジェクトの社外パートナーへの基盤環境導入・運用支援
・データ分析基盤に関する課題解決、新規技術調査と導入

化学品メーカーDWH/BI移行対応案件

■環境：
＜現環境＞
ソース：SAPECC6.0orスクラッチ
DWH：Oracle
BI：Jasper
ETL：Talend

＜新環境＞
ソース：S/4HANAorスクラッチ
DWH：AmazonRedshift
BI：AmazonQuickSight
ETL：Zero-ETL＋PL/SQL（ストアドプロシージャ）

・大手人材サービスを運営されているエンド様にてデータエンジニアとして参画していただきます。
・データベースをはじめ、多種多少なデータソースとデータ基盤を接続し、必要なデータを安全に取得してデータ基盤に保存します。
・データガバナンスの担当者と協力してデータに対して適切な加工を行い、安全な状態にしてユーザーに提供します。

【工程】
・要件定義（フロントに立ち非エンジニアである企画メンバーとの要件調整・折衝などからできること）
・設計
・製造、構築
・テスト

◆開発環境
AWS、Google Cloud、Databricks

AWS環境におけるAWS操作やトラブル時のログ確認など運用作業が中心。アプリ改修は行わない。

・Google Cloudを用いたデータパイプライン・集計パイプラインの構築
・BIツール（例：Looker Studio、Streamlit）を用いたダッシュボード構築
・要件定義に従った開発業務

・主要クラウドサービス（AWS、Google Cloud、Azure）を用いた開発経験（1年以上、Google Cloudが望ましい）
・Python、SQL、Git、Dockerを用いた開発経験（3年以上）

➀データ加工
・BigQueryやDataformを駆使し、グループが保有する膨大なデータをビジネスで活用可能な情報へ昇華させる
・通信販売事業での購買履歴やGA4データ、各種サービスの会員データ等、ドメインの異なる多様なデータをモデリングし最適なデータマートの構築

②データ可視化（BI画面作成）
・LookerStudioを用いて、直感的に状況がわかるダッシュボードの開発
・経営層や各事業責任者が閲覧するBI画面の開発

SASにて運用しているマーケティング資産をSnowflake環境へ移行するプロジェクト。
SASプログラムおよびデータセットの調査、移行範囲の検討、データ加工、
Snowflake環境へのデータロードまでの移行対応を担当。

※要件：★
・SASでのデータ加工経験★
・SASプログラム開発または運用経験★
・SQLの利用経験
・エンドユーザーと直接会話し、要件整理や施策方針決定を推進した経験★

データ活用基盤におけるBI領域の要件定義～ダッシュボード開発をご担当いただきます。
顧客ヒアリングをもとに、業務要件をBI画面へ具体化するポジションです。

ライブ配信事業における、データ基板の設計業務に携わっていただきます。

・Trocco / dbt を用いたETLパイプラインの設計・改善
・Snowflakeのロール・権限設計、マスキングポリシー・タグ伝播の実装支援
・データ基盤の開発標準策定・ドキュメント整備

【開発環境】
使用言語: Python, SQL, HCL（Terraform）
ETL：dbt, Trocco
データストア: MySQL, snowflake
インフラ: AWS, GCP
プロジェクト管理ツール: GitHub, Slack, Notion

ユーザーがTableau等によるデータ活用するにあたり、データ抽出・加工等に係る性能改善の支援。
※4月以降、Talendの処理性能改善に関わる領域に拡大する予定