分析基盤エンジニアの案件一覧

【概要】
大手メディア企業が収集する動画視聴ログのDMP構築支援業務です。
対象データは動画閲覧ログであり、様々なプラットフォームのログを保持しています。
直近では更なるデータ利活用に向けて既存テーブルのリファクタリングの改善や新規作成を行っています。また、コンテンツ内容に合わせた広告の実現に向けた開発を進めています。今回はデータの拡大により新しいテーブルの設計と実装が必要になります。幅広くプロジェクトのタスクに携わって頂くことを想定しています。
【開発環境】
・GCP(BigQuery,Cloud Function, GCE), digdag ,embulk
・Confluence,JIRA,Bitbucket
【対応内容】
・GCP主にBigQueryを用いたビッグデータのテーブル設計・データ集計
・データワークフロー・ETLの設計・数値検証・ドキュメント化
・データの集計と分析作業

・SQL経験　5年以上
・GCP、特にBigQueryの経験1年以上（AWSのご経験が数年あれば優遇）
・データクレンジング・集計・検証経験1年以上
・Gitを用いたコード管理
・データパイプライン設計経験　1年以上

大手卸小売業のデータエンジニアとして下記業を担当いただきます。
・AWS等のクラウドサービスを活用したデータ分析
・Redshiftでのデータ分析基盤構築
・各種KPI設計およびTableauなどのBIツールでのダッシュボード作成

・データ分析プロジェクトの経験
・データ分析基盤設計、構築、分析経験
・Redshift経験
・python経験
・BIツール経験

・10ヵ年計画で実現する次世代医療分析基盤の大規模開発のスタートラインを切るメンバーとして、インフラ設計段階から開発、本番適用まで一貫して携わっていただきます。
・また、国内医療での利用拡大が約束されている分析基盤の継続機能開発及び運用を実施します。

【開発環境】
・AWS：SageMaker、WorkSpaces、VPC Endpoint、Redshift、Aurora、EC2、ECR、S3等
・言語：Python、SQL

【対応内容】
・要件定義及びテスト設計
・インフラ設計及び監修
・ネットワーク及びセキュリティ設計
・開発実装及びテスト実施
・外部ストレージとの繋ぎ込み開発

・AWSでの開発実務経験及びテスト実施経験が3年以上ある
・AWSの複数サービスを使用したアプリケーション開発にインフラ設計から携わった経験がある
・CCNA程度のネットワーク理解
・LinuCレベル1程度のLinux理解

プロジェクトの技術面におけるリードで特にデータパイプラインの設計・構築
　・構築環境の理解からクライアント課題に合わせた設計
　・データ分析のためのBIの開発・運用
　・継続的なモニタリングプロセス、仕組みの構築
　・顧客のビジネス運営におけるデータ活用方法やドメイン知識を素早く理解し、設計・開発に落とし込む

・Pythonを含む複数言語(TypeScript, Javascriptなど)でのコーディング経験(3年以上)
・データ基盤および分析基盤などの開発・構築経験(3年以上)
・ETLやELTの実装経験
・クラウド環境上でのシステム構築・運用の経験
・GitHubを用いた開発経験

[ポジション]：分析基盤エンジニア

大手エンターテインメント企業様にて、 来年度発売ゲームタイトルの売り上げ予測プロジェクトにおける基盤構築をお願いする予定です。 データの調達、データ分析基盤の構築、データエンジニアリング業務を想定しております。

【業務イメージ】
・データの調達業務
・インサイトを意識したデータ分析基盤の構築
・上記構築に際するデータ加工
・ETL構築

・データエンジニアリング経験
・ETLの構築経験
・Bigqueryのご経験

・GCP上でのデータ分析基盤の保守・運用（メインのDBはBigQuery）

扱うデータは動画視聴データ、配信ログデータ、広告データなど様々です。

・GCPのツールリカバリー
・保守運用
・BigQueryのクエリなどのコスト見直し
・ETLツールの改修
・ソースコードのレビュー(Git)
など

・データ基盤の業務経験
・SQLでの集計クエリの実装経験
・クラウド環境でのデータ基盤の経験

[ポジション]：分析基盤エンジニア

位置情報を含むビッグデータを活用したデータ分析基盤構築（AWSやGCP）

現在新規事業で下記3つのデータを利用し、サービス展開を進めております。お客様へのサービス展開としては出店計画や市場調査、販促プロモーションなどに生かして頂きます。
①国勢調査データ(人口統計クラスタリング) 22万(町丁字)のジオデモグラフィクスデータ。
②スマホの位置情報データ(行動クラスタリング/1日に何十億のレコード)
③クレジットカードの購買データ(購買クラスタリング) マンスリーでは4700万UUのデータ。性別、年代、商品、金額、購買時間など

そこにおける分析環境の構築を行って頂けます。AWS、GCPは特に決まっておらず、一緒に話していきながら構築出来る方を探しております。

また、分析環境のみならず、依頼されたデータの抽出や、データ分析にも関われる案件となっております。

言語：SQL, Python, Java, JavaScript, JASON, API
インフラ：GCP(BigQuery)、AWS(Athena)
BIツール：Tableau

[ポジション]：分析基盤エンジニア

▼主な業務内容
- GCP上でBigQueryを用いたビッグデータ分析基盤の開発
-特定健康診断受診率向上事業データ解析運用
▼主な開発環境
- Python, Django, Flask, TensorFlow, SQL, Javascript
- AWS, GCP, BigQuery, AI Platform
- CircleCI, Terraform, Docker
- Tableau
- Slack, Notion, Asana​

– Pythonを用いたサーバーサイド開発経験(2年以上)

[ポジション]：分析基盤エンジニア

以下2つの案件（分析基盤・データ加工）を0.5人月づつご対応頂きます。
①分析基盤
既に構築済みの分析基盤のさらなる改善等をチームで案を出しながら実施します。
②データ加工
既存のデータ加工用のPythonコード及びSQLを要望に合わせて修正したり、データベースのカラム追加等を行います。

① 分析環境支援
* チームで開発する経験
* GCP、AWS上にデータ利活用に関するソフトウェアの開発、運用、保守の経験
* ネットワークに関する基本的な知識
* SQL, pythonの開発/運用経験
* gitの利用経験
* チームの開発工程の定義や改善した経験
* dockerを利用したアプリケーションの開発/運用
* ワークフローツールの運用経験
② データ加工
* チームで開発する経験
* GCP、AWS上にデータ利活用に関するソフトウェアの開発、運用、保守の経験
* ネットワークに関する基本的な知識
* SQL, pythonの開発/運用経験
* gitの利用経験
* チームの開発工程の定義や改善した経験
* ビジネスユーザーとコミュニケーションし、ソフトウェア開発を行った経験

・パブリッククラウドAzure上でのMLOps環境構築
・機械学習モデルを本番システムに組み込むための管理体制(機械学習基盤)を構築
・開発フェーズ：設計、製造、テスト

Python、Azure上での開発経験（2～3年以上）