分析基盤エンジニアの案件一覧

大手損保会社のAI-HUB（データ活用促進をミッションとするCoE組織）におけるPDFデータ構造化支援。事業部ニーズに応じた要件整理から分析・対応までを実施。CoEの一員として事業部メンバーと調整し、PJを主体的に推進。

テレビ・デジタル広告の配信実績データや成果レポートをオンライン上で統合・可視化する統合マーケティングダッシュボードの機能追加をお任せいたします。

下記サービスを用いて構築予定です。
Google Cloud（BigQuery/Cloud Composer）、Tableau Server

・現行データおよび加工仕様の理解
・ダッシュボード要件からのマートおよび加工処理の設計
・Cloud Composerでのデータパイプラインの設計
・ダッシュボード設計担当への伝達/レビュー

顧客の提供する各プロダクトからのデータ収集、加工・集計・可視化、
分析結果からの将来予測などをお願いします。

【開発環境】
・インフラ：AWS（Athena、Redshift、Glue、QuickSightなど）
・データベース：RDS（Aurora MySQL）
・ETL：AWS Glue
・BIツール：QuickSight
・言語：Python
・コミュニケーション：Slack、Zoom、Backlog、DocBase

エンドクライアント内にある散らかったデータ(BtoB向けの受発注や契約関係のデータ等)を連携しsnowflakeに蓄積してデータ利活用を推進していきたいと考えております。

業務スコープは以下を想定
・Snowflakeを利用したデータ蓄積+活用。
・連携されたファイルなどのデータをSnowflakeにてデータを蓄積。
・蓄積後ユーザに使いやすいように加工し活用してもらうよう設計・開発を行う。

【主なスキル技術や環境】
AWS(Lambda等)
Snowflake
Python
SQL
GitやGithub
CI/CD

Javascript
GCP
Informatica Intelligent Cloud Services（IICS）

その他(ツール作成等)
Powershell
bash
Excelマクロ

PJTの進め方
毎朝大手Slerの開発チームとクライアントの開発メンバーを交えた朝礼を行なっております。
必要に応じてエンド企業との打ち合わせが日中発生する想定です。

■プロジェクト概要：
テレビ・デジタル広告の配信実績データや成果レポートをオンライン上で統合・可視化する統合マーケティングダッシュボードの機能追加。

下記サービスを用いて構築予定。
Google Cloud（BigQuery/Cloud Composer）、Tableau Server
■役割：PL/SE
■作業内容：
・現行データおよび加工仕様の理解
・ダッシュボード要件からのマートおよび加工処理の設計
・Cloud Composerでのデータパイプラインの設計
・ダッシュボード設計担当への伝達/レビュー

・法人向けSaaSプロダクトにおけるデータパイプラインの設計・構築及び最適化を行っていただきます。
・具体的には様々な外部データソース（例：Google Drive, Dropbox, Webpage, etc）とのデータ連携のための処理の実装です。

・Pythonを用いたデータ処理（Flask, Pandas, NumPy, Daskなど）の実務経験3年以上

GoogleAnalyticsのデータをBigQueryに蓄積し、データマートを
作成、必要に応じてPython等でデータを加工(非構造データの
構造化等)し、Looker,Tableau,Excelでレポートし提出が主たる業務
以下、分析テーマをベースにメイン分析者として担当。

【想定分析テーマ】
　※参考　案件参画時のテーマに 応じ変更の可能性あり

1.カスタマーに関わる分析（顧客属性・商品情報・アプリ利用履歴）
2.アプリ（BtoCアプリ）の事業貢献に関わる分析
　（1の分析に加え、当該顧客のXB・解約に関わる分析）
3.パーソナライズに関わる分析（機械学習を用いた高度化）
4.他の施策（WLP・リレーションシップ革命）に関わる分析

3～5名のチームメンバーと共に安心安全な開発環境構築やパフォーマンス改善活動、レガシーな環境改善などを経験して頂きます。

• システムの潜在的なバグやボトルネックを特定し改善する活動
• アプリのサーバーサイドで採用されているミドルウェアやライブラリーのアップデート
• 新しいツールやライブラリーの検証・選定
• マイクロサービスアーキテクチャの設計と導入
• SREチームと連携してDocker等を用いた開発環境の整備

・ RDBMSにおいて高トラフィックなアクセスをさばいた経験(言語は問わない)
・ Webサービスにおけるシステムアーキテクチャについての知識
・ パブリッククラウド（AWS、GCP等）の利用経験
・ Ruby/Ruby on Railsやライブラリーに関する深い知識

OerackeEBS⇒SAPの置き換えに伴い、
データ分析基盤をInformaticaIICS、ストアドで再構築設計レベルの手戻りが発生している。
設計可能なメンバが必要。
（固定資産、棚卸管理メンバ）

固定資産、棚卸、リース等の業務知識経験

・詳細設計書作成（バッチ(ETL)設計）
・基本設計から詳細設計書を作成

・Intelligent Data Management Cloud(CDI)(以降、IDMC)ツールによる実装IDMCにて詳細設計書から実装を行う
経験者であれば尚良いですが新しい技術へのキャッチアップへの意欲のある方であれば問題ございません

・単体・結合テスト計画書作成とテスト実施
　　（単体テスト、結合テスト、システムテスト）