ETLの案件一覧

【業務内容】
某通信キャリアにおけるZTO開発におけるDWH・ETLツールをAWS上にて実装。
・メンバー管理
・ETLコーディング
・ワークフローシナリオ実装
・ユニットテストの項目作成
・ユニットテスト実施　など

【主な開発環境】
言語：Python
DB：MySQL
インフラ：AWS (RDS,Redshift,SMS/SQS,RDS,Lamda etc）
コミュニケーションツール：JIRA・Confulence
ソースコード管理：Git
その他ツール：Ansible

データ連携基盤システムの開発～運⽤/保守業務をお願いいたします。
ご経験に応じてBIツールを活⽤した開発業務もお願いする想定です。

環境：Synapse Analytics、Data Factory、PowerBI
Professional、Tableau、Asteria Warp、Denodo、Azure Databricks

グローバル展開を目指し、自社オリジナルの新規ブロックチェーンゲームを開発中のゲーム業界会社にて、ゲームの
データ分析関連業務を幅広く担当していただきます。
＜具体的な業務＞
・Tableauダッシュボードの要件定義・新規開発・運用・改修
・ブロックチェーンゲームにおけるデータ分析基盤の開発
・ ブロックチェーンゲームにおけるデータの分析と可視化
・ダッシュボードを基にしたデータ利活用推進
・ 事業課題の特定やサービス改善のためのログデータ分析
＜利用技術＞
SQL, BigQuery, GCP(Google Cloud Platform), AWS,
Python, dbt, Tableau, Github, Docker, terraform
お任せするポジションは通常のモバイルゲームと同様のKPI分析はもちろん、ブロックチェーンに関連する数値分析
も必要となり、非常にチャレンジングです。

・詳細設計書作成（バッチ(ETL)設計）
・基本設計から詳細設計書を作成

・Intelligent Data Management Cloud(CDI)(以降、IDMC)ツールによる実装IDMCにて詳細設計書から実装を行う
経験者であれば尚良いですが新しい技術へのキャッチアップへの意欲のある方であれば問題ございません

・単体・結合テスト計画書作成とテスト実施
　　（単体テスト、結合テスト、システムテスト）

クライアントでは人的資本の拡充に向けて、人材を可視化するBI基盤の構築・運用を行っており、
データに基づく人材戦略の実現を進めています。

【主な職務内容】
上記を推進している部署において、人材戦略上の課題分析および施策立案に向けて
下記対応をご依頼する想定です。
※ご依頼するスコープはスキル・経験に応じて検討いたします。

1. データガバナンスの実践

• データ定義・基準の整備
• データ品質管理プロセスの確立

1. データ収集

• TMSシステムからのデータ収集
• データクレンジング・ロジック改善

1. PowerBI環境の構築・運用

• ダッシュボード・レポートの整備・改善
• データモデルの設計・最適化
• アクセス権限の管理とセキュリティ対策

– データベース設計・運用の実務経験
– PowerBIまたは類似BIツールの使用経験
– データクレンジング・加工の実務経験
– SQL、ETL処理実装経験

【案件概要】データ連携基盤の構築
【作業内容】会計系データを取り込み⇒他データとマージ⇒レポート系のシステム(DWH/BIなど)へ連携
【工程/スケジュール】
2024/01-　現行調査など
2024/02-　要件定義工程

希望のスキルセット
　-データ分析基盤の全体的なアーキテクチャ検討
　-Snowflakeの設計・実装
　-Snowflake構築に関連するパブリッククラウド(AWS等)のご経験)
英語は優先度下がったので、英語できなくても可

【必　須】以下いずれかのスキル要件に2～3つ程度該当する
1)AWS（ETLとしてGlueを使用）
… 上流(アーキ検討)から対応可能な方。2に付随したAWS環境の構築。
2)Snowflake
… 上流(アーキ検討)から対応可能な方。Snowflakeは新規に構築。
3)Talend
… 設計・構築から対応可能な方。顧客内に既存のTalend環境あり、そこに追加していく
4)JP1/AJS
… 設計・構築から対応可能な方。ジョブ連携
5)英語コミュニケーション
… 親会社が海外でありコミュニケーション発生する
6)顧客調整、プロジェクトリード

・大手エネルギー事業会社において、SAPの機能（主にBO/BW）をAzureに移管し、 事業部にデータを活用してもらうというプロジェクトが進行中です。
しかし、ユーザー内で Azure Data Factory や PowerBI の知見者が不足しており、
SAPの内容を読み込んで Azureの設計書に落とし込んだものをもとに開発していただける方の募集となります。
また、データ定義等も一部整える必要があるため、開発に絡みながらデータマネジメントのタスクも進行できるとベストです。

・ETLツールの開発経験

【概　要】顧客のデータ連携（DB連携）について、要件調査し、構築を実施する。
【内容】
・アプリケーション調査
・ETLツールを利用するが、社内の共通利用であるInfomaticaのPowerCenterを利用可能か調査を実施

・製品選定
PowerCenter　もしくは、その他ツールを選定する。

・連携開発
現在使っているTalendから、選定ツールに連携プログラムを置き換える。

【必須スキル（リーダー）】
データベース（Oracle）の利用経験
SQLの作成経験
システムの開発経験（要件定義からテストまで※言語問わず）
ETLツールの開発経験
コミュニケーションスキル

【必須スキル（メンバ）】
データベース（Oracle）の利用経験
SQLの作成経験
システムの開発経験（基本設計からテストまで※言語問わず）
何かしらのローコード、ノーコードツールの開発経験
コミュニケーションスキル

・大手文具メーカーにおけるデータ分析基盤構築案件
・要件定義から設計、開発、リリースまでを担当
・AWSとSnowflakeを用いたデータ分析システム（ETL、DWH、BIなど）の開発を行うチームに参画予定

【環境】
・AWSサービス：S3、Glue、StepFunctions、CloudWatch、QuickSight、DataZone
・DWH：Snowflake
・開発ツール：dbt