データエンジニアの案件一覧

[ポジション]：分析基盤エンジニア

データ移送処理のバッチをGCP上で構築・実施等を担当。

・GCP上でのバッチ構築（Cloud Composerの実行）
・SQL（特にBQ）によるデータ加工経験
・Pythonによるデータ加工経験

[ポジション]：データ集計・分析補佐

グループに属する事業会社のデータを集約してあるDBにLookerを繋ぎこみ、 モニタリング環境を開発していただきます。

直接事業担当者に課題/要望をヒアリングし、事業貢献に繋がるLookerを開発していくプロジェクトにアサインさせていただきます。

・Looker全般機能の理解、開発ができる
・SQL：データマートの設計、ETL、データマート開発

[ポジション]：BIエンジニア

大手事業会社でのデータ活用プロジェクトに関わるお仕事です。 飲食領域・美容領域・旅行領域・学び領域・通販・割引チケット共同購入サービス・その他日常消費領域に関わる商品・サービスの提供を行っている事業会社にて、既存サービスのデータ活用に携わっていただきます。 あなたにお願いしたいのは、各関連サービスのデータを“見える化”するためのダッシュボード開発（使用ツール：Tableau /Looker）やデータマートの設計・開発、運用など。 関連サービスのデータを横断的に活用し、サービスを拡大させていくことがミッションです。膨大なデータを活用する、最先端のサービスに携われるチャンスです！
◎「SQLに自信がある」「大規模データにおけるデータマート作成の経験がある」という方を歓迎します！
◎スキル・経験によって、プロジェクトリーダーなどへのキャリアアップが可能です。

【具体的には…】
● KPIダッシュボード（Tableau／Looker）の運用、開発
● データマートの設計・開発、運用
● 予測モデルなど機械学習に用いるデータパイプラインの設計・開発、運用
● データガバナンスに関連する業務（メタデータ管理・社内QA対応・障害対応）
● Tableauダッシュボード用のデータマート運用保守 　 各種データの月次更新作業、カラムの追加作業

◎言語
・SQL：実務経験【必須】
　└3年程度の実務経験がある方を想定しています
◎経験
・SQLでのデータマート開発の実務経験
・運用設計経験
・BigQuery／Redshiftのデータ分析環境構築経験
・BIツールにおけるダッシュボード開発・運用経験(tableau、lockerの経験は尚可)
・ETLツールの知識、利用経験
・Git／Slackを用いたチーム開発経験

・CDP（DMP）の初期構築プロジェクトにおけるテクニカルディレクション業務
・CDP（DMP）の運用・実装業務（集計設計、集計PG実装、WF実装、管理画面設定作業、etc）
・BIダッシュボード構築業務

・クラウドDWHの構築経験
・SQLのご経験
・デジタルマーケティングの知見

【概要】
・旧データベースの内容を新データベースに名寄せを行うプロジェクト

【対応内容】
・データの名寄せ
・データベースの論理設計
・データクレンジング処理プログラムの作成
・SQL速度高速化

【開発環境】 ・AWS Glue
・AWS Lambda
・AWS Redshift

・名寄せ・データクレンジング経験があること
・データベースの論理設計経験があること
・ETLツール使用経験があること
・Pythonによるバックエンドロジック実装経験があること
・SQL操作ができること(HAVING,CASE文,サブクエリ等は必須)
・データウェアハウスとデータレイク構築経験があること

（要件定義）／設計／開発／テスト　基幹システムのデータがDenodo（仮想View）から参照できる状態にはなっていますので、Denodoから取得するViewやテーブル設計、Power BIの可視化が主な業務になります。
※要件定義はできなくても構いません。

・SQLの知識
・データモデリングの知識
・BIの知識

現在AAとTableuを中心としたデータ活用支援を実施している。 直近、Tableauを中心としたデータ活用案件において動けるメンバが不足している。

現在、1次開発は終了。 並行して2次開発の要件定義を始めようとしており、 Tableauでのモック作成、データ定義の整理の実施を進めていく必要がある。 上記案件を含み、今後発生する新規案件に対する対応の実施をお願いできる人材を探しています。

・商業施設におけるデジタルマーケティングの情報（売上、会員、キャンペーン、メール等プロモーション、WEBアクセス等）の情報を集計して可視化するTableauを作成。
→現在、PMとクライアント社員1名で対応しているが、リソース不足となっている。
→並行して2次開発の要件定義を進めていきたいとの要望が出ている。
システム構成はTreasureData＋Tableau。
但しTreasureDataの扱いに難がでている為、改めていく予定。

・PM（スケジュール管理、お客様との仕様調整等）はクライアント社員が実施
→ビジネスレイヤーの部分はクライアント社員が対応します。

■現案件における業務内容
Tableauデータ活用として、下記内容を実施中
・デジタルマーケティングデータとして存在しているローデーターをTableau上で可視化する案件＜1次開発を実施中＞
・Tableau、GCP、TreasureData活用の支援
・2次開発においても、要件定義から実施(クライアント社員が行う)しているが、 　Tableauのモック作成をお願いしたい

■求めるポジション(技術要素メイン)
① 元データから集計を実施してTableauでの可視化構築 　現在作成されているSQLの見直し、TableauのUI改修
②2次開発でのTableauのモック作成、お客様(エンドクライアント)はTableauの知識なし EXCELベースで要求事項を出してくるので、それを元にTableauでモックを作成 あわせて元データの確認と集計の定義を作成 （社員との分担を想定）

・Tableau　（必須） Tableauダッシュボード作成案件を実施できること
・SQL （必須）　データマートの設計、SQLでのデータ整形（ETL）
・TreasureData （SQLが使えればすぐに覚えられる）

クライアントで開発している(LINE配信プラットフォーム)から、 出力されるデータを元にビジネス課題を解決するデータエンジニアを募集。 具体的には、以下の業務を担当いただきます。

- ビジネスメンバーから依頼されたデータの抽出(SQL)

- データ利用環境の整備(ETL)や運用業務管理

ビジネス編
-　ビジネス課題解決を目的としたビジネスメンバーとのコミュニケーションが円滑に可能なこと。
-　提示されたデータ抽出依頼と解決したいビジネス課題を照らし合わせ、必要なデータの正否が検討できること。
-　開発チームとのコミュニケーションが主体的に取れること。

エンジニアリング編
-　データ分析のためのETL環境を構築・運用できること。
-　BigQueryの標準SQLについて基礎的な知識を有し、使用経験があること。
-　RDBMSについて基礎的な知識を有し、使用経験があること。
-　GCPの基礎知識及び、使用経験があること。
-　BQ, GCS, GCE, Dataflow, Cloud Function… 他
-　Google Cloud SDKを触ったことがあること。
-　何らかのBIツールの使用経験があること。
→データポータルを使うことになりますが、Tableau等の経験でも構いません。
-digdag, embulkについて使用経験があること or キャッチアップ可能なこと。
-Gitが扱えること。

[ポジション]：BIエンジニア

現在DWHを利用しているが今後はTableauを利用しデータ連携を行う。

・TableauServerへのデータ連携構築経験

住宅系・商業系データの分析用前処理として、
実データと最低限の設計ドキュメントを用いてデータクリーニング・加工を行う。
実データが定義書と乖離している部分もあったりするため、
必要に応じてメンバーとコミュニケーションをとり、
ドキュメントとコードにまとめていく。

■SQLスキル
　→ PKの重要性を理解し、データクリーニング、加工（集約・結合）等ができる（実際にはPresto）
　→ 自己結合の階差データ作成/GroupBy時CASEを使った条件集計/window関数理解/with句・サブクエリ入れ子処理綺麗に書ける
■AWS利用経験
　→ IAM（セキュリティ・権限回り）について最低限理解がある
　→ Glue/Athena利用経験あるとなお良い
■高い倫理観
　→ 大きな企業での仕事の方法に理解がある方
　→ セキュリティや安全/安定を重視