DB/基盤系の案件一覧

SQL、Pythonによるデータ変換処理の設計および開発

詳細：
顧客企業から受領したデータを、SaaSのデータ仕様に合わせるため、データ連携基盤では、データの変換を行っています。
顧客企業によって、データ形式が異なるため、データ変換処理は、個別に実装し、対応しています。
そのデータ変換処理について、設計、実装、テスト、リリースまでを担当頂きます。
設計は、顧客企業から受領したデータをどのように変換するか検討し、設計書に記載していきます。
実装は、作成した設計書を元に、変換処理の実装を行います。

工程：
設計～開発～テスト～リリース

■開発環境
・開発言語： Python、SQL
・インフラ： AWS
・AWS製品： EC2、ECS、StepFunctions、S3、Redshift、Lambda、Cloud Watch
・ツール： GitHub、Jira、Slack

・3年以上のプログラミング実務経験
　- 特にPythonを用いてpandasが扱える方

・システム設計の経験

・クラウド環境での開発経験　
　- AWS, Docker, Terraform, git

・SQLを用いたデータ集計とデータ連携の実務経験　
　- ウィンドウ関数を使用したクエリ作成　
　- 集計関数を用いたデータの集計・分析　
　- 複数テーブルの結合（JOIN）を含むクエリの設計　
　- サブクエリやCTE（共通テーブル式）を使用した効率的なデータ抽出　
　- インデックスの理解と活用によるクエリのパフォーマンス最適化　
　- データ正規化/非正規化に基づいたデータモデリングの知識　
　- トランザクション管理やロックメカニズムの理解（ACID特性）　
　- エラーハンドリングや例外処理の実装

・ゲーム開発における、サーバーインフラの構築およびサーバシステム開発

・IaCを利用したインフラ構築/管理の経験
・AWS/GCPなどクラウドサービスを利用したシステムの開発/運用経験
・ゲーム開発におけるCI/CDワークフローを策定し、構築した経験
・Docker/Kubernetes等のコンテナ技術を利用したシステム設計の経験

既存のレガシーシステム（PHP5.6 ＆ Codeigniter）から新システム（PHP8.2 & Laravel）への移行作業を実施。

＜フェーズ＞
詳細設計、開発、結合テスト、ユーザーTest、保守改修

＜開発環境＞
OS：Linux
開発言語：PHP、JavaScript
FW：CodeIgniter、Laravel
ミドルウェア：MySQL、nginx
管理ツール：Git、Docker、Vagrant, Ansible、Jenkins, Fabric
その他：React.js(+Redux)（一部のみ）
開発マシン：Windows or Mac（どちらも利用可）

・PHP 5年以上
・Laravel 3年以上
・JavaScript 3年以上
・チームでの開発経験
・PHPUnitなどのユニットテストツールの経験
・コードレビュー（レビュアー）の経験
・Dockerの実務利用経験
・CI/CDツール（Jenkins等）の実務利用経験
・基本設計から1人称で対応可能な方

FSVMの製品開発チームの中のインフラ担当として、構築検証並びに、各種バージョンアップ時の影響検証などを実施いただく案件です。
（商用環境構築ではなく、AWSのバージョンアップ追従や、FSVMそのもののバージョンアップ検証を行う）

・大手エンターテインメント企業において、親会社が運営するゲームタイトルのデータを、
データレイクに格納するデータパイプライン構築の業務がメインとなります。

内容や案件はゲームタイトルのスケジュール等に依存するため、
ゲームタイトル以外のデータパイプライン構築や、社内システムの構築をお願いする可能性もございます。
（Webサイト等その他サービス）

※お願いする可能性のある業務スコープ例

・データ分析基盤の開発・運用
データを収集するETL/ELTパイプラインの開発
運用体制構築のためのルール・ドキュメント整備
・上記を継続的に利用するための、ソフトウェアのバージョンアップや周辺ツールの開発(運用)
・技術調査

GCPを採用しており、GCP系リソースを中心に活用します。（BigQueryなど）
インフラ管理：terraform
パイプライン構築：Airflow(Cloud Composer)、Argo workflow、SaaSであるtrocco等

プライベートクラウド内製品バージョンアップ対応

・Linux環境の操作経験　
・Linux上に構築したWebアプリのバージョンアップ経験
※例：j2eeに準拠したearやwarで構築したアプリケーション
・アプリケーションコンテナ(Dockerなど）の構築経験

バックオフィス業務受託企業内の顧客管理システム刷新対応（ASP→PHP）
工程：開発～テスト

・PHP（Laravel）でのWEBシステム設計開発経験（経験4年以上目安）
・AWSに関する経験（ECS、EC2、RDS、S3など）
・Dockerを使用した開発経験

■背景
・募集部署はデータ基盤&AI・BI&運用を一気通貫で担っており、
　現在エンド会社にDWH構築を上流から提案中
⇒既契約のエンド会社より技術要件に落とし込める英語できる方を求められている(5月末ぐらいまでに決定希望)
⇒技術サポートで既契約中(Snowflake環境構築)

■当社クライアント支援範囲(該当部署)
・データ基盤構築、機械学習システム構築/精度向上、時系列データ予測/異常検知、自然言語(テキスト)解析、画像認識
■想定業務
・プロパーの方との連携(Snowflake実装)
・英語でのやり取り(技術要件に落とし込み)
・ドキュメント作成(アーキテクト構成図・設計書・仕様書)
・技術サポート

※基本的にプロパー(Snowflake環境構築出来る方)がいるが、自身が構築・技術サポートしていくのも想定業務

・DWH構築経験(特にSnowflake)
・上流(要件定義・提案)の経験
・データフロー/マート設計
・ビジネス英語(クライアント折衝)

※全て満たしていない場合でも相談可(英語は必須)
※DWH上流経験があれば幅は広がります
※DWHサービス活用は必須

●受領データの変換処理の開発
データ変換処理について、設計、実装、テスト、リリースまでを担当頂きます。
設計は、顧客企業から受領したデータをどのように変換するか検討し、設計書に記載していきます。
実装は、作成した設計書を元に変換処理の実装を行います。

●集計データを顧客システムに繋ぐ開発
設計、実装、テスト、リリースまでを担当頂きます。

●開発言語： Python、SQL

・Python（pandas）を用いた開発経験
・SQLを用いたデータ集計とデータ連携の経験
・Docker を使用した開発経験

【概要】
時系列モデルを構築して、ビジネス要件を満たせる予測精度を実現できるかを検証して結果を報告します。
構築したモデルのブラッシュアップを実施して精度向上を目指します。
複数のプロジェクトに対してスキルマッチした案件へアサインいただきます。

【業務】
・基礎分析
・予測モデルの要件定義
・分析用データの前処理、特徴量作成
・予測モデル構築、検証
・検証結果報告書の作成
・そのほかデータサイエンティスト業務全般

【体制】
2名体制
PM1名
DS1名（当該募集）

・Python、SQL経験（2年以上）
・LightGBMなど回帰アルゴリズムによる予測モデルの構築経験（3プロジェクト以上）
・モデルに投入する特徴量データ集計のパイプライン構築経験
・ドキュメンテーション能力
・コミュニケーション能力