DWHの案件一覧

・DWH層テーブルの要件定義・設計・開発・保守
　 - 関係者からのヒアリング・データ調査
　 - メンテナンス性・汎用性を意識したテーブルの設計
　 - SQLおよびPySparkを用いた実装
・DWH層テーブルについての問い合わせ対応・不具合調査
・DWH層開発環境の設計・開発・保守・運用
[案件例]
・売上集計用DWH
・機能利用状況DWH
■開発環境
　言語＿＿＿＿：SQL,Python,ShellScript
　ＦW＿＿＿＿：Apache Spark
　環境・ＯＳ＿：GCP (Google Cloud Platform),AWS (Amazon Web Services)
　ツール＿＿＿：Docker,Terraform,digdag,JIRA,Github

・自社プロダクトであるデータ統合SaaSおよび、AWSやGoogle Cloud等のクラウドサービスを用いたデータ分析基盤構築・データ統合パイプラインの設計および実装
・SQLを用いたデータマート作成、名寄せ、クレンジング等の実施
・BIツールを用いたデータ可視化
・外部サービス(CDP/MA/SFA等)とのデータ連携および活用の支援

【ツール】
AWS(Redshift, QuickSightなど), trocco
■開発環境
　言語＿＿＿＿：SQL
　環境・ＯＳ＿：AWS (Amazon Web Services)
　ツール＿＿＿：AWS Redshift (Amazon Redshift)
■開発工程＿＿：基本設計|詳細設計|実装・構築・単体試験

・デジタルマーケティングツールやデータ分析ツールへのデータ投入のためのETL 準備、実装を行います。
・某社向けデータ分析のためのデータ処理基盤の開発・保守・運用・機能追加

主な使用ツール、サービス：

・Snowflake, BigQuery などの DWH

・Embulk などの ETL ツール

・Hightouch などの Reverse ETL ツール

・AWS, GCP の各種サービス（S3, EC2, Step Functions, ...）

・さまざまなBIツール

DWHへのデータ連携を含んだ、データ基盤で動作するETL処理の開発、データパイプラインの仕組みづくりやデータのセキュリティ対応、運用業務の自動化、ドキュメント整備をご担当いただきます。

・分析用環境の構築(IFテーブルの設計・開発、分析用データマート設計・開発、テスト)

・マーケティングオートメーション メール送信対象のセグメント作成(SQL)

・アドホックレポートの作成(SQL＆re:dash)

・データ抽出

　データマートの作成やデータ加工、ETLツールの開発等を担当いただきます。

・某大手ネット印刷プラットフォームのデータ案件

・データ分析基盤の構築/運用

・各種システムからのBigQueryへのデータパイプラインの構築/運用

・BigQuery上のデータウェアハウス・データマートの加工処理の構築/運用

技術環境

・言語 : Python

・データベース : BigQuqery, Aurora MySQL 2.0, Aurora PostgreSQL

・インフラ : AWS (EC2, S3, Lambda etc.) , GCP

・バージョン管理 : git/Github

・CI : CircleCI, Jenkins

・コミュニケーション : Slack, Notion, ClickUP

大手自動車会社連結子会社のエンジンメーカーにて、親会社と同様のDWHを構築している。

様々なシステムからのデータ収集の実装、データベース設計、データガバナンスの整備などを実施いただきます。

・DWH設計者もしくは、DWH基盤構築の経験

・データウェアハウス構築経験者