Redshiftの案件一覧

美容系総合ポータルサイトを展開しているクライアントにてBIエンジニアとして以下業務をご担当いただきます。

・tableauでのダッシュボード作成
・BigQueryから施策モニタリング用のデータパイプライン作成
・ビジネスモニタリング/データ分析業務

DWH：BigQuery
ETL:Trocco
BI：Tableau

日本最大級の化粧品クチコミサイト運営企業にてデータ分析・モニタリング環境の整備など、メインに担当しているデータ戦略推進室にて業務していただき、データエンジニアとして必要なデータの抽出などお任せいたします。
下記アサイン想定の作業内容となります！

・BigQueryから施策モニタリング用のデータパイプライン作成
・tableauを用いたダッシュボード作成

【具体的には…】
・ビジネスモニタリング/データ分析業務
・200行前後のSQLを記述
・データ要件、分析要件の定義
・ダッシュボード作成など

・お客様からの問い合わせに対する調査
発生した障害や不具合の調査、修正対応
・システム負荷軽減やコスト削減などの調査、修正対応
・使用しているミドルウェア/ライブラリ群のアップデート対応

pandas ライブラリを利用した ETL 処理
をしていただきます。

担当フェイズ
設計～開発～テスト

大規模言語モデル（LLM）を利用したセキュアなシステムの開発、社内データとの統合を含む。
LLMの開発における深い技術知識の活用、社内データソースとの接続を可能にするためのインフラ構築。
技術戦略および戦術の策定と実施、データの利活用を最大化するためのアプローチの開発。
開発に必要なリソースの設計と管理、データアクセスと分析のためのシステムの構築。

主な担当業務：現状分析、データ活用の施策決め、データの可視化、データオペレーション

業務例①：XplentyやSnowflake、Amazon Redsift、Amazon QuickSight等のツールを用いて、お客様のデータを可視化し、経営判断等に使用可能な有用なデータをマイニングできるようにする。

業務例②：生成AI用のデータの準備やデータフローの設計・実装を行う。

技術戦略の立案と実行経験、データ利活用に関する知識。

上位クライアント（HR系）のデータマネジメント部署にてデータマート開発、基盤開発チーム（約10名）のリーダーポジションを担当いただきます。

データ分析/活用プロジェクトへ参画いただき、シニアデータエンジニアとしてデータマート開発実装をメインにご担当いただきつつ、技術リーダーとしてチームメンバーのサポート及び、データ要件の定義や調査、他部署との連携含めた顧客折衝をご担当いただきます。

【対応工程】
・分析用データマートの開発
　└データマート（テーブル）設計
　└SQL実装
　└バッチ処理実装
・社内メールシステムの保守運用
　└Python、SQL実装
・データマートの保守運用

【開発環境】
・データベース：Databricks、Redshift
・ワークフローエンジン：Airflow、Digdag
・プログラミング：Python
・インフラ：Azure、AWS
・コミュニケーション： Outlook・Teams・Slack・Backlog

・5名以上のチームリーダー経験 1年以上
・SQLを用いた分析用データマートの設計・開発・運用経験 3年以上
・Pythonを用いたデータハンドリングの経験 3年以上
・Webシステムに関する基本的な理解と業務開発経験

【概要】
通信会社サービスのデータ分析データマート開発・改修業務。
・BtoBのデータトリブンを進めていくためにDWHにデータを集める作業
・通信会社独自ツールよりデータを加工し、移行
・テーブル内データの整備がメイン。

弊社クライアント（HR系）のデータマネジメント部署にてデータマートの開発業務を担当いただきます。
データ分析/活用プロジェクトへ参画いただき、データエンジニアとしてデータマート開発実装をメインにご担当いただきつつ、データ要件の定義や必要に応じて各種調査も一部ご担当いただきます。
【対応工程】
・分析用データマートの開発
　└データマート（テーブル）設計、SQL実装、バッチ（Digdag）実装
・社内メールシステムの保守運用
　└Python、SQL実装
・データマートの保守運用
【開発環境】
・データベース：Redshift、BigQuery
・プログラミング：Python
・インフラ：AWS、GCP
・コミュニケーション：Outlook・Teams・Slack・Backlog

大手商社の商品データの品質を維持・向上するチームの業務支援案件となります。
「データ品質をチェックするシステムの保守・運用」「データの大量更新の業務支援」が主なミッションになります。

データの整合性をとるためのRPA（UiPath）の保守・運用をご支援いただきます。
このRPAでは、データ品質チェックシステムというAWS上（CloudWatch、Fargate、lambda、Redshift（DB））に構築されたシステムに対し、
SQLやExcelマクロを実行することでデータ抽出やアップロードファイルを作成。その後作成したファイルを別の上流システムにアップロードしています。
クライアントからの依頼に応じ、上記RPAの機能拡張や類似のRPAの開発などの作業がメイン業務となります。
作業管理、作業設計などは上位メンバーが実施するため、作業を実行する業務をご担当いただきます。

実務経験3～5年程度で、システムより業務に興味がある若手の方にマッチする案件となります。
また、受け身の態勢ではなく、「主体的に動ける」ことを重視しております。

2年ほど前にAWSをベースに分析基盤が構築されたものの、現状がわかりづらい状況となっています。
現状を調査し調査の後、必要に応じて「システムの再構築」
「一部破棄」または「システムの刷新」の方針決めを行います。
※詳細、募集背景は面談時にご説明いたします。

【ターゲットとなるシステム】
・In Data ： Salesforce 他
・Out Data ： Tableau 他