データエンジニアの案件一覧

メーカー様が小売店様と契約して受領しているPOSデータを収集しクレンジングして、DWH（snowflake）に蓄積するパッケージシステムをこれから受注する顧客用に個社対応で機能追加していく。

ログ管理プラットフォームの整備における実務および進捗管理を担当していただきます。
技術的なログ設計、出力設計・収集設計および実装作業を行いながら、
開発部門・基盤部門と連携し、プロジェクトを推進していただきます。

様々なWEBサービス（月間数千万ユーザー利用）を提供している社内において各業務に対してAIを活用した様々な改善を行っています。
技術的な横串組織として、事業部側と連携しながらデータ基盤の構築・運用を担当しています。データエンジニアリングの知識に加えて、GCP のアクセスコントロールやセキュリティ境界設計を理解し、セキュアで効率的なデータ基盤の実現を目指しています。

求める人物像

• データエンジニアリングとインフラ/SRE の両方の視点を持ち、セキュアなデータ基盤の構築・運用に情熱を持っている方
• アクセスコントロールやセキュリティ境界を意識した設計ができる方
• データ処理の効率性とセキュリティのバランスを考えられる方
• 新しい技術に対する学習意欲が高い方
• Claude Code や Cursor 等のコーディングエージェントを利用している方
• チームメンバーと協力して課題解決に取り組める方
• 事業部との調整や折衝を前向きに行える方

・Google Cloud の実務経験
– BigQuery の実務経験。特に GCS に配置したファイルを参照した外部テーブルへの理解および構築経験
– gcloud コマンドでのリソースの追加変更削除の操作
・Google Cloud でのアクセスコントロールの実務経験
– プロジェクトの新規作成や IAM による最小権限の原則を理解した上でのアクセスコントロールの設計・実装経験
– VPC Service Control によるセキュリティ境界設計の経験
・Terraform を用いた IaC 実装経験
– Google Cloud のリソースを対象とした IaC の実務経験
– ディレクトリ構成の設計経験
・Docker の実務経験
– コンテナ化されたアプリケーションの構築・運用経験
– Artifact Registry を使ったコンテナイメージの管理経験
・SQL の実務経験
– BigQuery での SQL 実務経験
– PostgreSQL、MySQL、SQL Server での基本的な SQL の読み書き
・データ基盤またはデータパイプラインの構築・運用経験
– ETL/ELT 処理の理解
– アクセスコントロールを考慮したデータ基盤の設計経験
・シェルスクリプト
– gcloud コマンド、Digdag、Embulk を使ったシェルスクリプト構築経験

Databricksを新規構築し、Databricks上でPoCとして機械学習のユースケースを実証する。

期待役割：
・基盤のリーディング
・顧客対峙、
・databricksの基盤周りの設計、構築
・databricksの標準機能をフルに活かしてデータサイエンティストの実装支援
（既存の数理モデルの解析は別担当者が実施します。解析後にdatabricksの標準機能を利用してモデルを実装頂きます。）

・クラウド基盤の設計、構築経験があること
・Databricksの構築経験があること
・DatabricksにてAutoML等での機械学習プログラムの実装経験があること
・顧客と仕様についての折衝経験があること
・1人称でタスク遂行できること
・顧客向けにパワーポイントで検証結果報告資料が作成できること

データエンジニア／クラウドエンジニア／PMとして、Databricksの導入によるデータ基盤開発や顧客企業のデータ利活用の促進業務。
◆Databricksを用いた顧客のデータ活用基盤開発、データ活用を支援するため、下記の業務を担当。
-データ利用部門との課題定義および要件整理
-データ基盤の設計／開発（AWS、Azure等、他のクラウドと連携したデータ基盤の設計・開発）
-データ基盤上のデータモデル設計・開発
-データ加工処理（ETL／ELT）の設計・開発
-データ分析を行う上で必要となるデータ可視化（BI）の設計・開発
-AIモデルの継続的なデリバリ（MLOps）を考慮した環境の設計・開発

-顧客もしくは自社のクラウド開発プロジェクトにおけるチームのリーダもしくはサブリーダとして、要件定義、設計、実装のいずれかの工程を担当した経験
-5名以上のチームのマネジメントもしくはリーダ経験
-Professionalレベル以上の認定資格（AWS、Azure、Google Cloud等）を有する方もしくは、3年以上のクラウド開発経験

社内データ基盤の活用を推進するため、BIレポートの設計・開発からデータマートの構築までを一気通貫で担当いただきます。 単なる開発作業にとどまらず、社内ステークホルダーからの要望ヒアリングや要件定義、運用マニュアルの作成、問い合わせ対応など、ディレクション業務も並行して行っていただくポジションです。
・BIレポート・セマンティックモデルの設計および開発
・データマート（DWH）の設計・開発
・BI活用に関する社内問い合わせ・改善要望の整理、対応
・各種運用マニュアル、ドキュメントの作成
・ビジネスサイドの意思決定を支援するアドホック分析の実施

・SQLを用いたデータ集計・分析の実務経験
・RDB（MySQL, PostgreSQL, BigQuery, Snowflake等）におけるテーブル設計の実務経験
・事業会社またはクライアント先での案件ディレクション、ステークホルダーとの折衝経験
・Python等のプログラミング言語を用いたデータ処理の基礎知識