データエンジニアの案件一覧

DWHへのデータ蓄積設計(DL、DM設計)

CognosからTableauへのBI移行作業支援

AWS上で運用されている情報系システムにおいてTableauの性能に問題を抱えており、その調査と対策の検討を実施いただきたいです。

今後Ph.2を進めていくにあたり、システムの企画検討から対応していく。
銀行側との会話、企画検討、関係者と一緒にレビューも含めて対応。

自社にてECサイト・口コミサイトを開発運営している大手企業でGoogle Cloudを利用したデータパイプラインの開発・運用を行っていただきます。

SAP、SFDC導入に伴い、レポート系の機能をBIで吸収することになりました。
BIコンテンツ／レポートの要件ヒアリング～開発・リリースまでをご担当いただきます。

・DWH層テーブルの要件定義・設計・開発・保守
　 - 関係者からのヒアリング・データ調査
　 - メンテナンス性・汎用性を意識したテーブルの設計
　 - SQLおよびPySparkを用いた実装
・DWH層テーブルについての問い合わせ対応・不具合調査
・DWH層開発環境の設計・開発・保守・運用
[案件例]
・売上集計用DWH
・機能利用状況DWH
■開発環境
　言語＿＿＿＿：SQL,Python,ShellScript
　ＦW＿＿＿＿：Apache Spark
　環境・ＯＳ＿：GCP (Google Cloud Platform),AWS (Amazon Web Services)
　ツール＿＿＿：Docker,Terraform,digdag,JIRA,Github

【案件概要】
・大手フィットネス会社のスクラッチの旧システム→SaaSの新システム移行にあたって、旧システムで出力していた帳票を新システムで出力するためのSQLを設計していただく

・自社プロダクトであるデータ統合SaaSおよび、AWSやGoogle Cloud等のクラウドサービスを用いたデータ分析基盤構築・データ統合パイプラインの設計および実装
・SQLを用いたデータマート作成、名寄せ、クレンジング等の実施
・BIツールを用いたデータ可視化
・外部サービス(CDP/MA/SFA等)とのデータ連携および活用の支援

【ツール】
AWS(Redshift, QuickSightなど), trocco
■開発環境
　言語＿＿＿＿：SQL
　環境・ＯＳ＿：AWS (Amazon Web Services)
　ツール＿＿＿：AWS Redshift (Amazon Redshift)
■開発工程＿＿：基本設計|詳細設計|実装・構築・単体試験

募集背景：
某大手化学メーカーグループの既存データセンターが2025年末で使用出来なくなる為、
新しく契約するデータセンターへの移転プロジェクトが
年初より始動しております。
夏頃からデータセンター移行の実作業が始まるにあたり、
システム基盤の構築メンバーを募集します。

業務内容：
移行/構築手順書を基に、移行/構築作業とテストも担当いただきます。
(設計工程までは別のメンバーが対応します)

現状はVMware上に乗っている、OSから上の層を
AWS/Azureといったクラウド上か、
新データセンターのVMware上へ移設していきます。

対象のサーバ台数は約1500台となります。
主な構成：
サーバOS・・　主にWindowsServerと、Linuxが少々
ハイパーバイザー・・　VMware
パブリッククラウド・・　主にAWSと、Azureが少々

移設にあたるOS/ミドルウェアまわりの作業も多少発生します。

・AWS　または、Azureによる環境構築ができること

・VMwareによる環境構築ができること
または、WindowsServerの構築ができること

・主体的に作業ができること