DB/基盤系の案件一覧

ビックデータ基盤構築・運用案件になります。
現在、オンプレにて社内システムのログをElasticsearch/Hadoopに集約し、
各組織にレポート等の可視化機能を提供している基盤を運用しております。
今回追加データの可視化の要件がありますので、
データパイプライン構築と可視化に伴う設計・構築を中心にご支援いただける人を探しています。

10月から要件定義が開始し、年内中にも基本設計が始まります。画像解析用AI実装し運用することを前提としており、学習・推論・評価・運用に関わる機能開発を行います。

【作業概要】
　・要件定義の打合せ参画、ドキュメント作成支援
　・担当機能の基本設計、詳細設計、開発、単体テスト
　・結合試験、総合試験の項目書作成、データ作成（教師データ正解ラベル付与含む）、試験実施
　・他メンバーの成果物レビュー
　・エンドユーザー、及びシステム側内のお打合せ参画（コミュニケーション能力を鑑み、参加打合せは選定させて頂きます）
　・PJ管理用の実績報告（工程、機能単位の作業実績）

【作業工程】
　要件定義、基本設計、詳細設計、開発、単体テスト、結合試験、総合試験

HR系クライアントのデータサイエンス部署にてレコメンドのアルゴリズム開発実装を担当いただきます。

・Python、Shellスクリプト、SQLなどを用いて、各種機械学習モデルなどをレコメンデーション施策に適用、実装開発を行う。

└各種レコメンデーション施策を、バッチ、APIなどにて提供する

・AIエンジニアとしてCSO、プロジェクトマネージャー等と連携しながら、
分散コンピューティング基盤 のコア技術部分への機械学習ライブラリ組み込み開発に携わって頂きます。
【技術環境】
言語：Python
FW：PyTorch, HuggingFace, SpeechBrain, scikit-learn
DB：Cloud Firestore
インフラ：AWS, GCP, Azure等
コミュニケーションツール：Zoom, Slack, Google Workspace
【特徴】
・フルリモートですので、ご自身のリラックスできる環境で作業が可能です。
・AI技術を駆使したプロダクトを複数抱えており、AIエンジニアとしてスキルアップできる環境です。
・国内外の各分野のトップクラスのメンバーが集まっており、経営層とも近い距離で勤務いただけます。

SRE支援を担っていただきます。

【開発環境／使用ツール】

• 言語: Go言語(Ent)、TypeScript（Next、React）
• プラットフォーム: AWS（EKS, S3, RDS, etc.）
• データベース：PostgreSQL
• CI/CD: AlgoCD, tekton
• 構成管理: Docker, Terraform, Kubernetes

・CI/CD環境構成およびライフサイクルの自動化の範囲決定におけるアドバイスの実施
・上記に必要な検証環境構築作業および要件定義の資料化
※上記取り組みを下記の①顧客案件および②社内研究開発の作業として行います　
①製造業向けデータ分析基盤構築：要件定義
・クライアントの持つデータ分析基盤の構築ソリューションをベースに顧客向けにシステムを構築する
・AWS Glueを中心したETL/ELT機能とBIツール（Power BI）、DWH（Snowflake）が主な構成要素となる
・要件定義の作業になるため、クライアントとともに一緒に検討を行える方がベター
・今のところ、下記のようなサービスが必要なのではと思案中
　AWS Glue
　AWS Lambda
　AWS Code Pipeline
　AWS Code Commit
・合わせて以下のサービスを組み合わせてジョブの実行管理・フロー制御を行う想定
　AWS Step Functions（詳細フロー制御）
　Amazon Managed Workflow for Apache Airflow（実行管理）
上記の設定内容をリポジトリへ保存してバージョン管理を行うことも必要と考えているため、これらの統合についてもテーマとなる
②研究開発
・上記顧客案件にデリバリーするためのソリューションの整備環境として、CI/CD環境を社内に構築する
・Snowflakeを用いたデータ基盤の構築を早期化するソリューション

クライアントゲーム事業で蓄積されたビッグデータを用いたデータ分析環境の基盤構築および開発、管理を行っていただきます。
環境構築にとどまらず、社内共通の内製BIツールで利用するためのデータ集計や、各タイトルのデータ分析者とのやりとりを通じてゲーム品質やサービス改善に繋がるための業務を担当していただきます。

・ログ、DBデータのETL/ELT処理のためのシステム開発/運用
・大規模データベースの構築/運用/管理
・社内BIツール向けデータ集計バッチ開発/運用
・データ分析者への技術的サポート

HR系のデータサイエンス部署にてレコメンドのアルゴリズム開発実装実務をご担当いただきます

データマート業務支援にて以下の業務をご担当いただきます。

・顧客調整
・調査、解析
・開発、テスト
・リリース対応

【概要】
・医療従事者向けポータルサイト上で展開されている医師を対象としたアンケート・調査
・ビジネス領域※及びプロモーション配信サービスの領域において、社内向け各種ダッシュボード・社外向け（クライアント向け）ダッシュボードの要件定義及び開発を担当

【業務内容】
・ダッシュボード開発要望のヒアリングと詳細要件定義、画面設計
・Tableauダッシュボード実装
・ダッシュボード実装に必要なデータマート整備（DB整備自体はエンジニアが担当するためエンジニアに対する要件提示）