分析基盤エンジニアの案件一覧

大手化粧品会社のDXプロジェクトにおいて、SQLを使用してDWHからのデータ抽出を行い、他システムへの自動データ連携設定などの構築をお任せできる方を募集しています。

プロジェクト全体では20名近くのメンバーが参画しており、その中の約5～7名で構成されているチームに所属いただきます。

【業務詳細】

プロジェクト全体を理解した上で、起用しているTreasure DataからSQLで複数のテーブルを結合、サブクエリも含めた詳細なデータ抽出、顧客マスタ・行動履歴・購買履歴といったデータを結合し、マーケティングデータの抽出や顧客のセグメンテーションを行っていただきます。

会員データはすべてTreasure Dataに入っており、新たな会員データも日々追加させていきます。

すでに構築設定したワークフローを読み解き、既存の構築内容を踏襲、改修を行い、SFMCで配信をおこないます。

客先社内のDBAエンジニアとしてDBの構築・運用などを主にご担当いただきます。
一部作業の引き継ぎもあります。

DBの構築経験

今後の世界的な課題であるエネルギー問題に対するシステム的な取り組みとなります。そのため社会意義の高い要件を新しい技術領域で対応していく事になります。現在、国内の一部地域を利用した分散電源のデータを共有化するためデータ連携基盤の構築が進められております。技術的な背景はクラウド・DWHの技術的な知見が必要となります。業務設計は出来ておりますが、アーキテクチャー設計は出来ていないため、抽象的な要件の非機能要件化を進めて頂きます。

GCP構築業務

・データパイプライン設計構築

・DWH、データマート設計構築
環境：

GCP（BigQuery,Dataflow等）

GCP構築経験

概要：

エンドクライアントの分析基盤の設計、開発、運用を担当いただきます
業務内容：

・外部とのデータ連携

・データ仕様や処理のスキームについての要件擦り合わせ

・AWS S3, Google Cloud Storage, Google Drive と言った各種ストレージと BigQuery 間でのデータの転送処理を Cloud Functions と Airflow を用いて実装・管理

・IAM の発行・管理、データのアクセスコントロール

・データサイエンティストと意見交換しながら、データの取得や前処理、予測モデル・予測値生成、および抽出のバッチ化・運用

・データ処理に係るコストのモニタリング、最適化施策

・データ連携に係るプライバシーマークへの対応

フラットな組織で、自身で物事を推進する文化です。

概要：

エンド企業へGCP導入にあたってのデータエンジニアを募集しています。
業務例：

・顧客折衝、要件整理、ドキュメンテーション

・データパイプライン設計構築

・DWH、データマート設計構築
環境：

GCP（BigQuery,Dataflow等）

弊社最初のプロダクトである、鉄スクラップ解析アプリケーションに搭載されるAIのモデルをAIチームと協業しながら、パイプラインを構築し、本番環境でモデルのトレーニング、テスト、デプロイ、配信、監視、保守、運用を担当いただきます。もちろんチームと相談して分担はしますが、データ収集、前処理といったデータエンジニア領域での活躍も期待しております。
1人目のMLOpsエンジニアとして技術選定はもちろんチームの開発スタイルを形作るところからお任せさせていただきます。将来的にCTOやEM等のポジションを目指すことも期待しています。

まだまだ出来上がった製品ではなく、ユーザーと近い距離で開発をすることができることも魅力の一つです。

【案件概要 】弊社クライアント（HR系）のデータマネジメント部署にてデータマートの開発およびディレクション業務を担当いただきます。

データ分析/活用プロジェクトへ参画いただき、データエンジニアとしてデータマート開発実装をメインにご担当いただきつつ、データ要件の定義やプロジェクトの進行管理などディレクション業務も一部ご担当いただきます。
【業務内容】

・データ分析/活用プロジェクトの推進

・データマート開発における要件定義、プロジェクトの進行管理

・分析用データマートの開発

　└データマート（テーブル）設計、SQL実装、バッチ（digdag）実装・データマートの保守運用

SAS(base)で作成されているシステムの更改案件。SAS固有の部分はバージョンアップ後の環境に基本的にはそのまま移行しますが、既存の画面機能がSASで構築されており、更改後はJAVAに置き換えを実施。参画された際は既存SASの仕様を読み解き、JAVA開発者に仕様を伝える役割を担っていただきます。

2023年4月以降も延長可能あり。

・SAS(Base)

SAP Analytics Cloud、Datawarehouse cloudを使用した開発作業

・DWH構築作業（DWH要件定義、IFデータ整理、データ処理方式検討、要件資料作成）

・BI構築作業（BI要件定義：画面要件整理、項目マッピング、要件資料作成）