データエンジニアの案件一覧

AccessからTableauへの移行を行っていただきます。
・事業で運用されている Access の処理解析および Tableau化
・Access が参照しているDBの特定および処理のSQL化
・Access 帳票で実現されているUIのTableau化
・窓口としてAccess ユーザーからの問い合わせ受領および相談

・ビジネスプラットフォームを展開されている企業様にて
データエンジニアとして参画をしていただきます。
・具体的にはデータパイプラインの設計と実装やデータレイク及びデータウェアハウスの設計と整備等に携わっていただきます。

◆主な開発環境・ツール
・使用言語：Python
・DB：PostgreSQL
・インフラ：AWS（Glue、S3、Athena等）
・その他ツール：Tableau Server、JupyterLab、Github、JIRA、Slack

・人事DX（人事DWH構築）でのプログラム作成
-データ抽出と加工
-データベース構築
-BIツールでのダッシュボード/レポート作成
・ドキュメンテーション業務（課題一覧、プログラム一覧、画面一覧、環境定義等）
・分析要件の定義

・PowerBIレポートスキル及びそれに必要な前処理等でのデータ加工スキル（Python等）

主に Python を用いたデータ基盤や ETL の構築・運用
・同じく Python（FastAPI）を用いて Web サービス向けサーバサイド API の実装・運用
・ クラウドインフラ（GCP）のアーキテクチャ上での機能追加・改善
・多数のデータサービス施策のモニタリングとインシデント発生時のオペレーション
・エンジニアリングチーム内の技術コミュニケーション（レビューや技術調査）
BI開発（未経験可)

BI/DWH構築の結合テスト以降のフェーズ対応
新規画面の開発の可能性あり

Google Cloud / AWSを利用した商用稼働サービスのデータパイプラインの開発・保守運用
データ分析システム・サービスの監視設計・運用
日々の運用業務から発生する課題の解決・改善

技術要素(★が特に重要)
GoogleCloud
★Cloud Composer2（及びAirflow2）
★Cloud Dataproc（Apache Spark(scala)）
Cloud Build
Cloud Storage
BigQuery
Cloud Monitoring / Cloud Logging
AWS
★Kinesis firehose
★SQS / SNS
★ECS
★Lambda
ECR
S3
Cloud Watch
その他
GithubActions
Terraform

某金融機関の吸収合併に伴う事業継承の為、下記基盤移行を行います。

現行オンプレ環境のサーバーOS EOLが2024年7月末、
そのタイミングでAWSへの移行を計画中です。

下記の作業を行うにあたりアーキテクト（テックリード）のような立ち位置で支援していただける方を募集しています。

・AWS SaaSを利用したデータパイプライン環境構築
　　-Lambda
　　-Glue
　　-Step Function etc…
・基本テンプレート開発
・システム監視
・構築する環境
・本番環境
・開発環境

Tableauでのデータ可視化業務となります。
具体的に、エンドユーザーに要件ヒアリングし、仕様確定後、ダッシュボードを作成となります。
※Tableau Server／Desktop／Prepの操作を伴う予定

上記業務に加え、現チーム体制における技術的な指導も一部行って頂きます。
※実務的な操作の最適化等が該当となり、講師などでは御座いません。

Tableau Server／Desktop／Prepの実務経験

弊社クライアント（HR系）のデータマネジメント部署にてデータマートの開発業務を担当いただきます。
データ分析/活用プロジェクトへ参画いただき、データエンジニアとしてデータマート開発実装をメインにご担当いただきつつ、データ要件の定義や必要に応じて各種調査も一部ご担当いただきます。
【対応工程】
・分析用データマートの開発
　└データマート（テーブル）設計、SQL実装、バッチ（Digdag）実装
・社内メールシステムの保守運用
　└Python、SQL実装
・データマートの保守運用
【開発環境】
・データベース：Redshift、BigQuery
・プログラミング：Python
・インフラ：AWS、GCP
・コミュニケーション：Outlook・Teams・Slack・Backlog

弊社クライアント（HR系）のデータマネジメント部署にて、BIエンジニアとしてTableauレポートの開発をご担当いただきます。
また事業企画やデータマート開発チームとの折衝、主にはデータ要件の整理、設計などレポートで表現するにあたっての要件定義もご担当いただきます。
【対応工程】
・Tableau レポートの開発・保守運用
・Tableau レポート用のデータマートの設計
　└テーブル設計、SQLデータ抽出、リレーション構築、バッチ実装
・レポート開発にあたっての要件定義
　└実現方法検討、連携項目整理、データ要件の整理
【開発環境】
・データベース：Redshift、BigQuery
・プログラミング：Python
・インフラ：AWS、GCP
・コミュニケーション：Outlook・Teams・Slack・Backlog