データ基盤の案件一覧

募集背景
もともと1つのプロダクトに複数の機能が搭載されていましたが、機能ごとに切り出しプロダクト化を進めたため、合計4つのプロダクト数となりました。
マルチプロダクト化による、要件定義数の増加に伴い、本ポジションの募集をしております。

▽チーム体制
開発責任者　1名
・システムエンジニア1名（★ここが今回の募集ポジションです）
・フロントエンドエンジニア 3名
・バックエンドエンジニア　5名
└データ基盤チーム
└GraphQLサーバーチーム
・データエンジニア　 2名
※上記は社員のみ
業務委託で複数名のエンジニアにご参画頂いております。

▽業務内容
・プロダクトの要件定義
・プロダクト仕様ドキュメントの管理
・プロダクト仕様の策定
・プロダクトの品質管理

・Webシステムの開発における要件定義の経験を5年以上
・Webシステムの開発における設計・実装・テストの経験

クライアント内のサービスデータの可視化PJにて下記業務をご担当いただけます。
・Tableauによるデータの見える化（レポーティング・KPIダッシュボード作成）
・SQLを用いた大規模データベースのデータハンドリングや分析環境の整備
・分析に基づく事業課題の発見及び解決策の提案

【概要】
・クライアント社内部署にて、社内のデータ活用を推進すべく、ビジネスプロセスのデジタル化、分析用データ基盤の提供、部門と並走したデータ活用支援を行っている
・課題の1つとして、ユーザー自身の手で分析要件に合わせたデータの加工や可視化、分析の実施を行えるようにするためのユーザー教育が挙げられる。

【業務内容】
・データカタログ(TBD)、Snowflake、Tableauの利用に関わる教育コンテンツの作成と研修の企画と実施
・データカタログに格納するメタデータの拡充

グローバルブランドとして国内外に展開している某小売企業においてデータエンジニア業務（データ基盤構築、ETL設計・開発）をご担当いただきます。

DWH：Snowflake
ETLツール：dbt

・ビジネスプラットフォームを展開されている企業様にて
データエンジニアとして参画をしていただきます。
・具体的にはデータパイプラインの設計と実装やデータレイク及び
データウェアハウスの設計と整備等に携わっていただきます。

【参画のメリット】
・勤務形態としてフルリモートになりますので、
ご自身のリラックス出来る環境で働くことが可能となっております。

◆主な開発環境・ツール
・使用言語：Python
・DB：PostgreSQL
・インフラ：AWS（Glue、S3、Athena等）
・その他ツール：Tableau Server、JupyterLab、Github、JIRA、Slack

位置情報プラットフォームを運営するエンドクライアントにてデータエンジニアを募集しております。

【背景と期待する役割】
顧客ごとやプロダクトごとにデータマート作成しているため、新規顧客が増えるごとにdbtを利用しデータパイプラインを整える必要があります。
組織の拡大のため要件の判断から一人称で行える即戦力の人材が必要になっております。

【業務スコープ】
・dbtを用いたデータモデリング
・dbtを用いたデータパイプラインの構築
・BigqueryからSnowflakeへの移行
※ご経験があれば

【体制】
7，8名程度（業務委託含む）

クライアントでは「商品名○○」など、クライアントの提供する各種サービスをひとつのIDで使用できる統合管理システム「●●」を運用しております。
今回のポジションは議事録、通話データなどの多様なデータをデジタル化し、統合管理をするデータプラットフォームの構築がメインミッションとなります。

クライアントのデータエンジニアとして、CTO、CSO等と連携しながら、データインテグレーションに関する企画・開発全般をご担当いただきます。

＜具体的な業務内容＞
・データプラットフォームの企画およびアーキテクチャ設計
・データパイプラインの設計・構築
・データ分析のためのBIの開発・運用
・継続的なモニタリングプロセスの構築・運用
・データサイエンティスト、データアナリストが作成する分析フローの運用改善支援
・顧客データ活用の実態やドメイン知識の理解
・CTO、CSO等と連携し、プロジェクトの目的・方針・計画等の策定 等

技術環境
＜プロダクト開発部＞
言語：TypeScript, Python, Flutter
フレームワーク：Vue.js, Nuxt.js,Node.js
データベース：Cloud Firestore
インフラ：AWS, GCP, Azure, Cloud Firebase, Cloud Functions
ソースコード管理：Bitbucket
プロジェクト管理ツール：Notion, JIRA
コミュニケーションツール：Zoom, Slack, Google Workspace

＜R&D部門＞
開発言語：Python
フレームワーク：PyTorch, HuggingFace, SpeechBrain, scikit-learn

・データユーザーからの要求をくみとり的確なデータとフローの設計を行い、パイプラインの構築や
　パイプラインを動かすデータ分析基盤の運用保守を行っていただきます。

・Google Cloud、AWSを利用した商用稼働サービスのデータパイプラインの開発・保守運用と
　日々の運用業務から発生する課題の解決・改善を行っていただきます。

・BigQuery、Cloud Composer(Airflow)、Pythonの実務利用経験
・Embulk、DigDagの利用経験
・Linuxサーバの運用保守経験
・AWS、GCPいずれかのクラウドサービスの開発及び運用経験

AWS Lambda(Python)でPostgreSQLのテーブルをSELECTする処理60本の量産・単体テスト
サンプルコードあり。抽出条件も更新日付のみのため比較的イージー。（★4月直近でやっていただきたい作業）
ETL処理の開発、単体テスト
結合テスト、システムテスト、運用テストの実施要員

・SQL開発経験
・Pythonの経験

■背景
・クライアント内の提案活動に於いてDWH案件が増えており、リソースが必要となった
■クライアント支援範囲
・データ基盤構築、機械学習システム構築/精度向上、時系列データ予測/異常検知、自然言語(テキスト)解析、画像認識
■エンドクライアント
・建築・製造・医療など
■想定業務
※クライアントの案件状況やスキルによってポジション・案件は検討
・データ基盤を構築するプロジェクト。蓄積したデータをBIやAIで活用するためのプラットフォームの設計・構築が主業務
要求開発フェーズからご参画いただくことを想定。
・顧客案件におけるデータ基盤構築支援（要件定義・設計・構築・テスト・マニュアル作成など）
・要件定義 /基本設計/詳細設計
・ETLジョブ開発
・DWH構築
・ドキュメンテーション(設計書・仕様書)

・DWHサービス知見
・基本設計～製造・テスト経験
・データフロー/マート設計
・ドキュメンテーション力

※全て満たしていない場合でも相談可
※DWHサービス活用は必須