DB/基盤系の案件一覧

在庫最適化システムを支えるデータ基盤の構築を行っていただきます。自社サービスSaasの新バージョンをこの春リリースし、エンタープライズとの契約が急激に増えている中で、非常に多くの機能改善要望や機能追加要望が出てきています。顧客からの数億レコードにもなる大量データの加工をSQLやPythonを用いて作成し、集計後、データストアに投入する機構の構築に携わっていただきます。社員エンジニアとスクラムチームを形成し、スクラムイベントを通じて、開発メンバー全員でスプリントを消化していく体制になります。
【募集背景】新バージョンの機能追加が急務であり、エンジニアリソースが不足しているため。
【開発環境】・開発言語： Python、SQL・DB: Aurora(PostgreSQL互換)、Redshift・検索エンジン： Amazon Elasticsearch Service・ライブラリ・フレームワーク：Pandas、Numpy、Dask・インフラ： Amazon Web Services・AWS製品： ECS、S3、Step Functions、Lambda、CloudWatch・環境、ツール： Docker、GitHub、Jira、Slack、CircleCI、Sentry

・脆弱性対応各種サーバ関連の脆弱性対応・サーバ保守業務Windows/Linuxパッチ適用ゲストOS構築セキュリティ等の各種エージェントインストール各障害調査対応

・各種MW保守（JBOSS、SVN、AVAMER等）各種構成変更作業セキュリティ等の各種エージェントインストール各障害調査対応

-環境；WindowsSV及びLinuxインフラ環境：Azureコンテナ環境：AKS

【業務内容】機械学習チームにおける技術支援
目先は下記案件を推進・担当１）チャットボットAIの性能向上２）需要予測AIの研究開発■役割：データサイエンティストおよびプロジェクト推進■業務内容：・課題出し、方針検討・メンバーの指示、フォロー、レビュー・チーム内および事業部とのMTG、報告・学習/テストデータ作成、分析、アルゴリズム実装、評価■開発言語、技術・開発言語、環境：Python、JyupterLab、Pytorch・アルゴリズム：チャットボット：BERT需要予測：ランダムフォレスト、ロジスティック回帰、線形回帰他■体制：5名

・データ分析基盤の大規模な、追加開発・改造を実施予定。・DWH設計者（データ設計など）もしくは、DWH基盤構築（ツール設計など）

業務：プロダクトの分析業務を支える基盤の機能拡充ならびに運用自動化に関わる開発を担当いただきます。・データウェアハウスへのデータ連携を含む、データ基盤で動作するETL処理の開発・データパイプラインを管理・運用・監視する仕組みづくり・取り扱うデータのセキュリティやガバナンス対応・各種運用業務の自動化とドキュメント整備
環境：プログラミング言語: Python, SQLバージョン管理: Git/GitHubデータ分析基盤、環境: AWS, SnowflakeETLツール: trocco, Airbyte, dbt(導入準備中)IaCツール: TerraformBI: Redash, Google Spread Sheet, Looker Studioコミュニケーション: Slack, ClickUp, Notion

リモートワークをベースとしていますが、週1日程度出社日を設けています。週5未満の場合でも、出社日、スクラムイベントのため火曜は勤務日となるようお願いします。

・データ連携案件管理：データ供給元からデータ利用者のために日程調整や管理業務・基盤構築：事業要請に応じたデータレイク,データウェハウス,マートの実装,テスト・基盤移行

■営業担当からのコメント■Pythonでゴリゴリコードを書くというよりも、基盤移行やマート管理等、管理系の業務が主となります。

クライアント社内で運用している需要予測・発注数量最適化ソリューションにおけるデータパイプライン、MLパイプラインの運用、エラー発生、顧客問い合わせ時の初動調査のご担当をいただきます。複数のクライアントの運用を行っており、各パイプラインの運用、さらには、将来的にはその開発まで対応を可能な方を期待しています。

最先端タクシーサービスに蓄積されたデータを用いてデータ解析や機械学習モデルの改修を行っていただきます。
【環境】　言語＿＿＿＿：Python,SQL　ＤＢ＿＿＿＿：BigQuery　ＦW＿＿＿＿：Django　環境・ＯＳ＿：GCP (Google Cloud Platform)

大手通信企業が提供するポイントサービスが保有し、1,000万人以上の登録者を抱える公式LINEの登録者拡大、関連サービスへの送客・収益化をミッションとしたLINEの運用業務になります（体制：PM1名, 分析担当2名, 運用者 3名）大手通信会社の保有する数千万の会員IDとLINE IDを突合し、LINEを起点に顧客ARPUを最大化していただく業務を担当していただきます。分析担当者の主な役割としては、月間20件ほどのLINE配信業務にともなう配信結果の集計・分析において、大手通信会社の保有する会員IDと突合した顧客行動分析になります。加えて、サービスを横断した顧客ARPU最大化のため、LINE登録者の各サービス内の行動分析を行い、LINE配信PDCAを実施いただきます。※今回、TONARIWAというツールを用いて社内の会員基盤とLINEを連携させた配信を実施します。LINE上の基本的な行動ログはTONARIWAで取得できる想定なのですが、場合によっては生ログデータをLINEから抽出し、会員基盤のデータと突合いただく業務が発生いたします。

■概要GCPでサーバレスシステムを作るべく、開発を進めておりGCP、Kubernetesの設計～構築をしていきたい。GCP、Kubernetesを基盤とし、Node.jsなどいくつかフレームワークを上物としている状況。

・GCP、Kubernetesの設計～構築の経験