DB/基盤系の案件一覧

【業務概要】

広告クリエイティブの制作プロセスを事前効果予測AIで支援するサービスの新機能開発を担当していただきます。
【開発環境】

Mac, GitHub, GCP
【コミュニケーション・ツール】

Slack, Notion, Google Meet, Zoom, Repsona, Tableau
【システム】

Python / TensorFlow / Triton Inference Server / Docker / Embulk / Argo WorkflowVertex AI / GKE / Cloud Run / Dataflow / GCS / CloudSQL / Memorystore / BigQuery / PubSubCloud Build / Cloud Monitoring
【業務内容】

機械学習モデルを中心とした新しいサービスの設計・開発を担当していただきます

・膨大な広告データのデータエンジニアリング

・画像・動画・テキストを扱う高度な機械学習モデルの学習基盤構築

・機械学習モデルのAPIサービス設計開発と運用

・CI/CD・モニタリング・インフラの調整などの運用

レガシーなシステムから収集したデータを、イタリアで構築されたDWHへ適切な形で整理しながら格納していくことが求められています。
英会話のスキルにより、担当いただく業務内容と稼働率が変動します。
■英会話レベル：

ビジネス外国人技術者と英語でディスカッションしながら、DWHの設計や勘定科目の変換ロジックを構築する。

稼働率の範囲は40～100％
■英会話レベル：

日常会話PowerBIツールやExcel、Accessを用いてデータ間の相関関係を検証したり、データの格納を行う。

稼働率の範囲は40％前後

・本年9月末まで予定・現場では英語が飛び交いますので、英語に抵抗がない方がフィットするかと思います

スマートシティ内におけるフロントエンドシステム（ソフトウェア）制作とバックエンドも含めたドキュメント作成・管理支援

■仕事内容

ビッグデータを活用した、SaaS型分析アプリケーションの開発・運用を進めていただきます。

また現在の地上波テレビ放送のみならず、今後新たに動画配信サービスでも同様の視聴データ分析サービスを開発・提供しており、そのサービス設計・開発の立ち上げを担っていただきます。

【プロダクト開発】

・自社サービスのプロダクトの機能開発、運用

・動画配信サービスを対象とした新プロダクトの企画、設計、開発

・データサイエンティストが考案した新たな分析手法に応じたプロトタイプの開発

【データ基盤運用】

・ETLシステムの開発、改善、運用

・AWS上のインフラ基盤の改善、運用

■開発環境

・言語：Python、Typescript

・フレームワーク：Django、Flask、pandas、Angular

・データベース：Snowflake、MySQL、PostgreSQL、Redis

・インフラ：AWS （ECS、Lambda、Batch、Redshift、RDS、Route 53、SES、SNS、etc）

・CI/CD：GitHub Actions

・テスト：pytest、Cypress

・開発ツール：JetBrains PyCharm有償版、DataGrip、VSCode、その他有用なものは積極的に使用、購入

・デザインツール：Figma

・BIツール：Redash、Tableau

・バージョン管理：GitHub

・コミュニケーション：Slack、Zoom、Backlog、Confluence
■チーム

執行役員： 1名

エンジニア：9名

データサイエンティスト：4名

【業種】

・大手学習塾企業
【概要】

・AWS DMSの構築、マネジメントと保守運用。

・Tableauでのアウトプット

・DMSと社内環境との接合、運用
【開発環境】

・AWS Glue

・AWS Lambda

・AWS Redshift
【募集要員構成】

・データベースエンジニア
【対応内容】

・AWS DMSの構築、マネジメントと保守運用。

・Tableauでのアウトプット

・DMSと社内環境との接合、運用

・複数テーブル結合におけるデータベース及びView設計

・クエリの設計と作成

・クエリの動作確認におけるテストの実施

・AWSのデータ取り込みの管理、運用

・デイリーバッチの理解と管理
【時期】

・即日（長期継続前提の案件となります）
【募集人員】

・1名

日本最大手コミュニケーションプラットフォーム企業が運営している大手デリバリーサイトに関わる開発
■工程

基本設計～テスト

開発環境

・Java(springboot)

・MySQL

・AWS

・Docker

・GitHub Actions

・Git

【背景】

アクセス解析データ/DBデータ/APIデータ等合計600TBのデータ基盤を管理データ基盤を管理・改善する人員が不足しており今回の募集にいたりました。
【お願いしたい業務】

* 運用改善

* データ基盤関連ツールの導入(ELTツール - dataform, データガバナンス - dataplex/DataCatalogなど)

* CDPの構築(店舗向け、ラベル推定/スコア推定など, SFAツールへの連携)
【できればお願いしたい業務】

* 新規データ連携対応(DB - embulk, API - Cloud Run/Pythonによる実装)

* データマート整備(Composerなど)
DWHはbigqueryBIはtableauはtreasuredataにアクセスし可視化しています

・ヘルスケアデータ等を活用したデータ分析作業や機械学習プログラム作成

・特定の案件や作業を長期間実施するのではなく、2～3ヶ月単位の案件を複数実施して頂くことを想定（並行実施あり）

・お客様リーダのもとで、チームで作業ができる体制が望ましい

弊社クライアント（HR系）のデータ事業部にてデータ抽出業務を担当いただきます。

（主に戦略・方針策定のための実態の把握に向けたデータ抽出

クエリの「読み・書き」ができるだけでなく、依頼者側がどのような用件でデータ抽出したいのかを汲み取って使仕様検討・データ抽出ができる方を求めています。
【業務内容】

・基幹データやアクセスログからのデータ抽出

　└新規のSQL作成、既存SQLの調査/改修

・依頼者（事業担当者）との抽出要件の整理、プロジェクトの進行管理

【業務内容・稼働イメージ】※ Phase1だけの参画も可。

・Phase1: 5-6月: 60%稼働

　- データマートの整備(Bigquery)

　- データマートのデータを利用して Tableauでの分析環境整備

・Phase2: 7月以降: 20%稼働

　- 週次レポートの作成・報告

　- アドホック分析対応