データエンジニアの案件一覧

【概要】
・大手小売企業で現在利用しているデータ加工機能の再構築およびI/F連携の可視化を行うための構想策定フェーズ
・インプットの対象となるシステムは複数あるためヒアリングを行いas-is、to-be策定を実施（インバウンドのDMSは今回作り直さない想定）

【体制】
2名（PM1名、メンバー1名）
※今回はメンバーポジションが対象
※テクニカル面での支援を期待されている

【業務スコープ】
①データ加工機能の再構築
・適正な機能配置
・POSデータ加工処理の改善
・統一商品マスタの作成（すべての雑誌の属性も付与可能）
・レガシーな技術（COBOL）からの脱却、脱ホスト
・運用体制強化、運用の負荷削減

②IF連携の可視化（HULFTHUBの利用）
・データ加工サーバをクライアント情報基盤の週配信を中継するシステムに変更

【スケジュール（仮）】
・2月～5月：構想策定フェーズ
・6月～：設計、構築

・Lookerで作成されたダッシュボード・レポートの修正・管理
・新規機能がリリースされた際に、必要な修正を既存レポートに加える
・重要KPIレポートの品質管理
・不要なレポート・古い定義のレポートの棚卸し
・各部門向けKPIダッシュボードの作成

■背景
・募集部署はデータ基盤&AI・BI&運用を一気通貫で担っており、
　現在プリセールス中である。(DWH)
・ただ受注となった場合、プロパーを含めてリソース不足が目下課題となっている。
■クライアント支援範囲(該当部署)
・データ基盤構築、機械学習システム構築/精度向上、時系列データ予測/異常検知、自然言語(テキスト)解析、画像認識
■エンドクライアント
・建築・製造・医療など様々
■想定業務
・データ基盤を構築するプロジェクトを想定。
　蓄積したデータをBIやAIで活用するためのプラットフォームの設計・構築が主業務となる。
　要求開発フェーズからご参画いただくことを想定。
※下記スキルによって相談
・顧客案件におけるデータ基盤構築支援（要件定義・設計・構築・テスト・マニュアル作成など）
・要件定義 /基本設計/詳細設計
・ETLジョブ開発
・DWH構築
・ドキュメント作成

主に医療、製薬系のサービスを複数展開されているメガベンチャー企業にて、
電子カルテのデータプラットフォームを現在開発しております。
そのプラットフォームを開発するにあたり、データの品質を考慮しながら、
DWH、データ基盤の設計構築、dataformでのデータパイプライン構築や
バッチへの反映を主にご担当いただきます。
入力されたデータがテストデータではないかなどデータの品質を考慮いただけると嬉しいです。

【開発環境】
・DB：BigQuery
・言語：JavaScript
・SQLパイプラインツール：dataform
・BIツール：Looker

・官公庁向けのデータ分析基盤において、データレイク、データパイプライン、DWHの設計業務をご担当いただきます。
今回は3名の募集ですが、2名は設計業務、1名は運用設計をお任せいたします。
BIツールにはTableauを使用する予定でございます。
設計フェーズは現状3月までですが、
案件状況により構築フェーズも引き続きご担当いただきます。

以下のいずれかをご担当いただきます

【分析基盤のリプレイス】
・リプレイス中の分析環境の構築支援およびバックエンドアプリケーションの開発
・AWSでの開発
・Redash、Athena、Glue、S3等のAWS基盤で動いているBIツールの変更
・QuickSinghtまたはPower BIを予定（選定中）
・Lambda（Python)、EventBridgeを用いた分析基盤へのデータ追加処理の機能追加

【AI基盤の構築＆再構築】
・Azure上に構築済みのAI基盤の機能追加や再構築対応（予定）
・AzureもしくはAWSでの開発
・Azure Functionsの #C → Pythonリライト
・API Mamagerを使ったAPI化

■開発環境 ：開発マシン：Mac
クラウド環境：AWS / Azure
言語：Python / Golang / PHP / #C
管理ツール：GitHub Enterprise / ZenHub etc.
その他ツール：Docker / CircleCI / GitHub Actions / Datadog etc.

データソースからDWH、ETLへ繋ぎ、データマート構築までのワークフロー開発及び、運用までのエンジニアリングをお願いします。

フェーズ：
12月下旬より構築開始
3月末リリース予定
その後、運用

環境：
SQL/Python
Snowflake(DWH)
Alteryx(ETL)
PowerBI(BI)

PowerBIのダッシュボードの設計構築をお願いします。

フェーズ：
12月下旬より構築開始
3月末リリース予定
その後、運用

環境：
SQL/Python
Snowflake(DWH)
Alteryx(ETL)
PowerBI(BI)

クラウドインテグレーションサービスを中心に展開している受託企業の案件です。

今回は、航空会社向けに次世代クラウドAPIプラットフォームの構築・運用業務を担当していただきます。
主に、

・API基盤（MuleSoft）とAPI支援基盤（AWS上）の構築・運用作業。

・API基盤では、VPC/DLBの構築、アラートやモニタリングの設定。

・API支援基盤では、EC2サーバやAWSの各種サービスの構築、CloudWatchによる監視設定など。

全国小中学校を教務支援を行うSaaSパッケージの刷新、クラウド移行におけるバックエンド側のアーキテクト業務