分析基盤エンジニアの案件一覧

某ユニコーン企業にてデータアーキテクトとして業務をお願いいたします。

【業務スコープ】
大きく下記2つのタスクをご依頼する予定です。
比重は新機能開発案件6割：データ基盤タスク4割
※100％稼働率の場合

・新機能開発に伴うデータアーキテクトタスク
　-ログ設計
　-データマート作成
　-LookML作業

・データ基盤タスク
　-ETL運用保守及び新規開発
　
【参考使用ツール】
BigQuery、Looker、Dataform、CloudCompaser

■担当業務
　・すでに稼働中システムの機能追加、機能改修のビジネス要件定義（プロセスの整
理を含む）、要件定義書作成
　・ユーザーストーリー／Technical Requirementの作成
　・開発チームとの情報共有
　・ステークホルダーコミュニケーションのサポート
　・SQLを用いたデータValidationの実施
　・SIT・UATのサポート、レビュー

・DWH層テーブルの設計
・DWH層テーブルのSQLおよびPySparkを用いた実装
・DWH層テーブルについての問い合わせ対応・不具合調査
・DWH層開発環境の設計・開発・保守・運用

データエンジニア・コンサルタント募集
某エネルギー会社における全社DXを目的としたBI基盤更改案件
Azure databricks を使った、データエンジニア業務

作業内容：
・Databricksとして最適なデータの持ち方の定義、それに基づくデータを整理/分析/整形業務

■背景
・クライアント内の提案活動に於いて自然言語案件が増え始めており、リソースが必要となった
・クライアント内で自社分析ツール(テキスト分析)あり
■クライアント支援範囲
・データ基盤構築、機械学習システム構築/精度向上、時系列データ予測/異常検知、自然言語(テキスト)解析、画像認識
■エンドクライアント
・建築・製造・医療など
■想定業務
・データ基盤を構築するプロジェクト。蓄積したデータをBIやAIで活用するためのプラットフォームの設計・構築が主業務となります。要求開発フェーズからご参画いただくことを想定。
・顧客案件におけるデータ基盤構築支援（要件定義・設計・構築・テスト・マニュアル作成など）
・要件定義 /基本設計/詳細設計

・データ種の追加やアプリケーション追加によるデータ処理(Go言語・コンテナアプリケーション)の追加
・既存データ基盤(オンプレ、Kubernetes環境)の改修・検証・テスト
・各種ミドルウェア(CI/CD、監視、DB)の導入・検証・テスト
・データ基盤の量産
・顧客との打ち合わせ

　グローバルでエンタメビジネスを展開するクライアントのシステム刷新プロジェクトとなります。
　プロジェクト自体はECサイトやチケット販売、来訪者向けサービス、モバイルアプリなど幅広いシステムが対象となっております。
　今回募集するポジションはMicrosoft Azure Blob Storageやその他データエンジニアリングツールを用いたデータ基盤構築やデータ移行に関するポジションとなります。
　対象となる領域は、Webチケットストアとチケット発券に関するシステムとなります。
■作業内容：
　・データ基盤構築やデータ移行方針の検討
　・スクリプトやETLツールを活用したデータ変換や自動化
　・SQLとAPIを使用したデータインジェクション対応

グローバルでエンタメビジネスを展開するクライアントのシステム刷新プロジェクトとなります。
プロジェクト自体はECサイトやチケット販売、来訪者向けサービス、モバイルアプリなど幅広いシステムが対象となっております。
今回募集するポジションはMicrosoft Azure Blob Storageやその他データエンジニアリングツールを用いたデータ基盤構築やデータ移行に関するポジションとなります。
対象となる領域は、Webチケットストアとチケット発券に関するシステムとなります。

主な業務内容
・データ基盤構築やデータ移行方針の検討
・スクリプトやETLツールを活用したデータ変換や自動化
・SQLとAPIを使用したデータインジェクション対応

大手製薬業における、MRの業務改善をSnowflakeの新しいプレビュー段階の機能を用いてどう行っていけるのかを評価検証していくイメージ。
PoCをクイックに回す必要があるため、WBSに則って実直に進めるタイプというよりは、プロパの担当者の方ともコミュニケーションをこまめに取りつつ実現性を上手く探りつつ進められるような方を求めております。

・Snowflakeの構築経験

・データ利活用のトライアル実装
・既存のシステムデータや、業務で利用されているExcelデータをLakeに取り込み、ETLを実装してDWH、DMを構築する。
・分析要件に基づきBIツール上にダッシュボードを実装する。
・データの授受に際し、システム間連携機能を実装