分析基盤エンジニアの案件一覧

製薬企業がマーケティングやMEDICAL AFFAIRS活動のために使うことができる
医療ビッグデータの機能開発・運用保守をご担当いただきます。
主な業務内容
・新規機能開発
・運用保守開発
・問い合わせ対応、データ抽出業務
・その他PDCA実施

技術スタック：
・LOOKER
・TABLEAU
・BIGQUERY
・DATAFORM
・AWS(ROUTE53, ALB, S3, CLOUDFRONT, ECS ETC)

【概要】
・在庫最適化システムを支えるデータ基盤の構築
・Saasの新バージョンをこの春リリースし、エンタープライズとの契約が急激に増えている中で、非常に多くの機能改善要望や機能追加要望の相談増
・数億レコードにもなる大量のデータ加工をSQLやPythonを用いて作成、
集計後、データストアに投入する基盤の構築
・エンジニアとスクラムチームを形成し、スクラムイベントを通じて、開発メンバー全員でスプリントを消化していく体制

【工程】
基本設計　詳細設計　開発　単体テスト　結合テスト　総合テスト　運用

【開発環境】
・開発言語： Python、SQL
・DB: Aurora(PostgreSQL互換)、Redshift
・検索エンジン： Amazon Elasticsearch Service
・ライブラリ・フレームワーク：Pandas、Numpy、Dask
・インフラ： Amazon Web Services
・AWS製品： ECS、S3、Step Functions、Lambda、CloudWatch
・環境、ツール： Docker、GitHub、Jira、Slack、CircleCI、Sentry

現在クライアント（大手化粧品メーカ）ではグループ横断DXを進めています。
その中の一環としてグループのデータ基盤からMAツールへの
パイプライン構築、データマートの作成など以下のようなデータエンジニアリング業務をご担当いただきます。
・活用目的に即した質の高いデータをDWH、BI/AI基盤に供給する信頼性の高いデータパイプラインの構築・管理・運用
・データマネジメント／データガバナンス構想策定、実行プロセス/体制のデザインと推進
・分析目的に適したDWHの構築（データモデル、スキーマ）
・分析チーム、業務チームなどの関連部署と連携したデータに関する要件定義
・社内分析基盤と導入ツールの監視・管理、OSSであればそのメンテナンス

・データパイプラインの構築・運用経験
・SQL

DWHへのデータ蓄積設計(DL、DM設計)

今後Ph.2を進めていくにあたり、システムの企画検討から対応していく。
銀行側との会話、企画検討、関係者と一緒にレビューも含めて対応。

自社にてECサイト・口コミサイトを開発運営している大手企業でGoogle Cloudを利用したデータパイプラインの開発・運用を行っていただきます。

・DWH層テーブルの要件定義・設計・開発・保守
　 - 関係者からのヒアリング・データ調査
　 - メンテナンス性・汎用性を意識したテーブルの設計
　 - SQLおよびPySparkを用いた実装
・DWH層テーブルについての問い合わせ対応・不具合調査
・DWH層開発環境の設計・開発・保守・運用
[案件例]
・売上集計用DWH
・機能利用状況DWH
■開発環境
　言語＿＿＿＿：SQL,Python,ShellScript
　ＦW＿＿＿＿：Apache Spark
　環境・ＯＳ＿：GCP (Google Cloud Platform),AWS (Amazon Web Services)
　ツール＿＿＿：Docker,Terraform,digdag,JIRA,Github

【案件概要】
・大手フィットネス会社のスクラッチの旧システム→SaaSの新システム移行にあたって、旧システムで出力していた帳票を新システムで出力するためのSQLを設計していただく

・自社プロダクトであるデータ統合SaaSおよび、AWSやGoogle Cloud等のクラウドサービスを用いたデータ分析基盤構築・データ統合パイプラインの設計および実装
・SQLを用いたデータマート作成、名寄せ、クレンジング等の実施
・BIツールを用いたデータ可視化
・外部サービス(CDP/MA/SFA等)とのデータ連携および活用の支援

【ツール】
AWS(Redshift, QuickSightなど), trocco
■開発環境
　言語＿＿＿＿：SQL
　環境・ＯＳ＿：AWS (Amazon Web Services)
　ツール＿＿＿：AWS Redshift (Amazon Redshift)
■開発工程＿＿：基本設計|詳細設計|実装・構築・単体試験

募集背景：
某大手化学メーカーグループの既存データセンターが2025年末で使用出来なくなる為、
新しく契約するデータセンターへの移転プロジェクトが
年初より始動しております。
夏頃からデータセンター移行の実作業が始まるにあたり、
システム基盤の構築メンバーを募集します。

業務内容：
移行/構築手順書を基に、移行/構築作業とテストも担当いただきます。
(設計工程までは別のメンバーが対応します)

現状はVMware上に乗っている、OSから上の層を
AWS/Azureといったクラウド上か、
新データセンターのVMware上へ移設していきます。

対象のサーバ台数は約1500台となります。
主な構成：
サーバOS・・　主にWindowsServerと、Linuxが少々
ハイパーバイザー・・　VMware
パブリッククラウド・・　主にAWSと、Azureが少々

移設にあたるOS/ミドルウェアまわりの作業も多少発生します。

・AWS　または、Azureによる環境構築ができること

・VMwareによる環境構築ができること
または、WindowsServerの構築ができること

・主体的に作業ができること