分析基盤エンジニアの案件一覧

鉄鋼業向けBIプラットフォームを基盤としたデータ蓄積
BIプラットフォームを基盤としたデータ蓄積機能を流用し、
各システム・業務領域へ横展開していくエンハンス開発案件です。
現行で稼働している機能を流用し、
新たなデータ収集機能を追加していく想定となります。
テスト工程がやや複雑とのことで、開発経験が豊富な方、
もしくはテスト設計・実施まで対応できる方を求めています。

作業内容：
詳細設計、製造、単体テスト、結合テスト

環境：
Microsoft Azure、Microsoft Fabric

DWH/BI領域における業務支援および分析基盤の構築・運用改善をご担当いただきます。

・既存集計フローの自動化・効率化
・既存帳票（Excel, CSV）からのSQL作成、BI（QuickSight）での可視化・分析
・AWS（Glue, Athena等）を用いたETL処理、データレイク・データマートの構築
・既存のデータ分析基盤の改修・運用保守

◆主な開発環境・ツール◆
・言語：Python (PySpark, pandas), Power Query, VBA, SQL
・DB/DWH：AWS Athena, Glue Data Catalog, AWS RDS (SQLServer), S3
・BIツール：QuickSight
・環境：AWS Lambda
・管理ツール：GitHub

要件定義をお願い致します。

■環　境：
＜現環境＞
ソース：SAPECC6.0orスクラッチ
DWH：Oracle
BI：Jasper
＜新環境＞
ソース：S/4HANAorスクラッチ
DWH：AmazonRedshift
BI：AmazonQuickSight

メーカー様が小売店様と契約して受領しているPOSデータを収集しクレンジングして、DWH（snowflake）に蓄積するパッケージシステムをこれから受注する顧客用に個社対応で機能追加していく。

通信事業者向けデータ統合システムを主体としたデータマート構築および、BIツールによる可視化業務を担当。

データエンジニアの立ち位置として、設計・構築業務に加え、部分的に顧客調整も実施。
Tableau Prepを用いたデータ加工・統合処理の実装、進捗・課題管理、会議体での報告対応を通じて、データ基盤の品質向上を支援する。

Dataiku上での自動生成アプリ作成いただきます。
想定される作業内容は以下です。
WebAppsまたはAgent Connectを用いたアプリUIの作成と、ETL・推論パイプラインの自動化設定を行います。
データ接続・前処理・モデル評価・運用設計を含む一連の開発およびテストを担当します。

Databricksを新規構築し、Databricks上でPoCとして機械学習のユースケースを実証する。

期待役割：
・基盤のリーディング
・顧客対峙、
・databricksの基盤周りの設計、構築
・databricksの標準機能をフルに活かしてデータサイエンティストの実装支援
（既存の数理モデルの解析は別担当者が実施します。解析後にdatabricksの標準機能を利用してモデルを実装頂きます。）

・クラウド基盤の設計、構築経験があること
・Databricksの構築経験があること
・DatabricksにてAutoML等での機械学習プログラムの実装経験があること
・顧客と仕様についての折衝経験があること
・1人称でタスク遂行できること
・顧客向けにパワーポイントで検証結果報告資料が作成できること

データパイプラインの構築、BIツールの整備を中心にご自身のスキルに合わせて業務をご担当いただきます。
具体的には下記になります。

・dbt（data build
tool）にて構築されたデータパイプラインのデータモデルのリファクタリング
・データ利活用のための環境整備　等