ETLの案件一覧

・大手エンターテインメント企業において、親会社が運営するゲームタイトルのデータを、
データレイクに格納するデータパイプライン構築の業務がメインとなります。

内容や案件はゲームタイトルのスケジュール等に依存するため、
ゲームタイトル以外のデータパイプライン構築や、社内システムの構築をお願いする可能性もございます。
（Webサイト等その他サービス）

※お願いする可能性のある業務スコープ例

・データ分析基盤の開発・運用
データを収集するETL/ELTパイプラインの開発
運用体制構築のためのルール・ドキュメント整備
・上記を継続的に利用するための、ソフトウェアのバージョンアップや周辺ツールの開発(運用)
・技術調査

GCPを採用しており、GCP系リソースを中心に活用します。（BigQueryなど）
インフラ管理：terraform
パイプライン構築：Airflow(Cloud Composer)、Argo workflow、SaaSであるtrocco等

エンド企業様の賃貸物件サービスの保守・改修を行っていただきます。

下記想定業務になります。
・Java、Pythonでのバックエンドでのバッジ処理メイン
・Junitを使ったテスト(結合テスト、単体テスト)

Vtuber関連事業におけるデータ分析基盤のマネジメント業務に携わっていただきます。
データアナリストやデータエンジニアと連携しデータの信頼性、精度、整合性を確保するための取り組みをリードいただきます。

【業務内容】
・データ分析基盤の設計、構築、および運用
・データ品質の監視、評価、および改善
・データパイプラインの最適化と自動化
・データガバナンスおよびデータ管理のベストプラクティスの導入と実践
・データベースおよびデータウェアハウスの管理
・データセキュリティとプライバシーの確保
・データアナリストチームおよび開発チームとの連携

【開発環境】
使用言語: Python, SQL, HCL（Terraform）
ETL：dbt, Trocco
データストア: MySQL, snowflake
インフラ: AWS, GCP
プロジェクト管理ツール: GitHub, Slack, Notion

データプラットフォームの企画およびアーキテクチャ設計
データパイプラインの設計・構築
データ分析のためのBIの開発・運用
継続的なモニタリングプロセスの構築・運用
データサイエンティスト、データアナリストが作成する分析フローの運用改善支援
顧客データ活用の実態やドメイン知識の理解
CTO、CSO等と連携し、プロジェクトの目的・方針・計画等の策定等
【プロダクト開発部】
言語：TypeScript, Python, Flutter
フレームワーク：Vue.js, Nuxt.js,Node.js
データベース：Cloud Firestore
インフラ：AWS, GCP, Azure, Cloud Firebase, Cloud Functions
ソースコード管理：Bitbucket
プロジェクト管理ツール：Notion, JIRA
コミュニケーションツール：Zoom, Slack, Google Workspace
【R&D部門】
開発言語：Python
フレームワーク：PyTorch, HuggingFace, SpeechBrain, scikit-learn
データベース以降はプロダクト開発部と同様

・Pythonを含む複数言語（TypeScript等）での開発経験(3年以上)
・SQL、Java、Scalaでの開発経験尚可
・データ基盤および分析基盤などの開発・構築経験(3年以上)
・AWS、GCP等の各種クラウドサービスの利用およびスケーラブルなクラウドベースのアーキテクチャデザイン・実装経験
ETLやELTの実装経験
・TerraformなどInfrastructure as Codeの運用経験または興味関心

作業概要　：2~3名チームのリーダー業務
想定作業　：
・メンバーのサポート（技術面／進め方など）
・Alteryxを利用した開発作業
・課題発生時の対応方法検討および顧客報告
・打合せで発生した顧客からの問合せ対応