データエンジニアの案件一覧

秒間25万リクエストを超える動画配信をはじめとした視聴に関するビッグデータの収集・整形・蓄積まで一貫して行なっていただきます。

【業務内容】
ビッグデータ基盤におけるデータの収集、データレイクからデータウェアハウス／データマートまでのワークフローの開発・運用をお任せします。
ご自身のアイディア・工夫をカジュアルに提案しプロダクトに反映していただける環境であり、単純に作るのではなく価値を提供することを重視しております。
データ基盤はGCP（Google Cloud Platform）を主軸とし、サブシステムにはAWS（Amazon Web Services）を部分的に採用した構成。日々進化するクラウドサービスをキャッチアップし最適な構成に随時進化し続けています。
今後もさらに安定してバージョンアップやスケーラビリティ・パフォーマンス改善を重ねるため、その開発の中核を担っていただくデータエンジニアを募集しております。

【開発環境】
■主要開発技術：GCP（Google Cloud Platform）環境でのワークフロー開発
■開発言語：Python, JavaScript, SQL
■クラウドプラットフォーム : Googleクラウド（BigQuery, Dataform, Workflows, CloufdFunctions, CloudRun）
■データ収集 : Fastly
■データウェアハウス : BigQuery
■コミュニケーションツール：Slack
■開発手法：アジャイル（一部ウォーターフォール）
■開発支援ツール・環境：GitHub, GitHub Actions（CI/CD）
■構成管理 : Terraform
■エディタ/IDE：VSCode Vim（＊お好みのエディタを使用していただいてOKです。）

・Power BIを活用したデータ可視化・レポート作成
・Power Automateを活用した業務フロー自動化（クラウド/デスクトップフロー）
・Accessを利用したデータ管理・システム開発（VBA活用）
・各種データソースとの連携（Excel, SQL, SharePoint, API連携）
・データ整備・業務プロセス改善の提案

スマホ決済サービスを展開している企業において下記業務をご担当いただきます。

【解決したい課題】
・dbtで提供する中間テーブルの開発について、業務要件を理解して実装できるリソースが足りていない

【想定する業務内容】
dbtによる中間テーブルの開発
-ユーザーへの要件ヒアリング
-各ドメインのテーブル仕様理解
-クエリの実装
-新規モデルの開発・検証
-既存モデルのリファクタリング

・BigQuery
・データエンジニアとしての実務経験2年以上
・大規模データの中間テーブル構築経験（データモデリング）
※Airflow, Cloud composer など他ツールでのテーブル設計開発の経験があれば dbtの利用経験はなくても良い
・Github

Vtuber関連事業におけるデータ分析基盤のマネジメント業務に携わっていただきます。
データアナリストやデータエンジニアと連携しデータの信頼性、精度、整合性を確保するための取り組みをリードいただきます。

【業務内容】
・データ分析基盤の設計、構築、および運用
・データ品質の監視、評価、および改善
・データパイプラインの最適化と自動化
・データガバナンスおよびデータ管理のベストプラクティスの導入と実践
・データベースおよびデータウェアハウスの管理
・データセキュリティとプライバシーの確保
・データアナリストチームおよび開発チームとの連携

【開発環境】
使用言語: Python, SQL, HCL（Terraform）
ETL：dbt, Trocco
データストア: MySQL, snowflake
インフラ: AWS, GCP
プロジェクト管理ツール: GitHub, Slack, Notion

・分析運用チームメンバーとして、主に下記のような内容を対応いただきます。
・SQL+R言語でのデータ分析、データ抽出、データ加工
・Pythonでのモジュール改修(設計～テスト)
　※キャッチアップ期間を取るため、R言語の経験はなくて構いません
・年単位の長期PJのため、長期継続が可能な方の募集となります。

■チーム/全体人数
チーム4名程度/全体10名程度

■開発環境■
・DB：BigQuery
(経験無い場合でも、固有の使い方はキャッチアップしていただく形で問題ございません)
・開発言語：R言語 / Pyhtonなど
・バージョン/チケット管理：Github / JIRA / Confluence / backlog など
・コミュニケーションツール：Slack / Googlemeets / Zoom など
・その他：googleスプレットシート、googleドキュメントなど

要件定義～リリースまで

・データ取得元の基幹システムが置き換わるため、
　それに関わる既存帳票・現行帳票・取得元の項目のマッピング
・データ取込処理（Dr.Sumインポートタスク、バッチ、Dr.Sum DataLoader）
・データ加工（Dr.SumのViewや場合によってはDSScriptを使用）
・Datalizer帳票の作成
・Datalizer for Excelで出力した結果に対するマクロでのExcel加工
・お客様がDr.SumやDatalizerを習得するための支援
　※上記のうち2～3個担当してもらう予定です

自社内でのシステムをSaas連携している。新システムがあるとデータ連携をする必要がありそこをご支援いただきたい。
データ連携においてデータ設計や、データが正しいか否かの検証をお願いしたい。

・データ設計
・SQLデータ集計
・ビッグデータ取扱経験

データプラットフォームの企画およびアーキテクチャ設計
データパイプラインの設計・構築
データ分析のためのBIの開発・運用
継続的なモニタリングプロセスの構築・運用
データサイエンティスト、データアナリストが作成する分析フローの運用改善支援
顧客データ活用の実態やドメイン知識の理解
CTO、CSO等と連携し、プロジェクトの目的・方針・計画等の策定等
【プロダクト開発部】
言語：TypeScript, Python, Flutter
フレームワーク：Vue.js, Nuxt.js,Node.js
データベース：Cloud Firestore
インフラ：AWS, GCP, Azure, Cloud Firebase, Cloud Functions
ソースコード管理：Bitbucket
プロジェクト管理ツール：Notion, JIRA
コミュニケーションツール：Zoom, Slack, Google Workspace
【R&D部門】
開発言語：Python
フレームワーク：PyTorch, HuggingFace, SpeechBrain, scikit-learn
データベース以降はプロダクト開発部と同様

・Pythonを含む複数言語（TypeScript等）での開発経験(3年以上)
・SQL、Java、Scalaでの開発経験尚可
・データ基盤および分析基盤などの開発・構築経験(3年以上)
・AWS、GCP等の各種クラウドサービスの利用およびスケーラブルなクラウドベースのアーキテクチャデザイン・実装経験
ETLやELTの実装経験
・TerraformなどInfrastructure as Codeの運用経験または興味関心

PowerBIを活用したダッシュボード化の支援
７，８個あるExcelと裏で持たせている人事データと紐づけてKPIの達成率を出すために、PowerBIの設計、実装をいただきたい。

・PowerBIの活用、設計の経験

①顧客活用支援(Salesforce: CRM)
②営業支援(Salesforce: SFA)
③分析(Salesforce: Tableau)

クライアントのPMと2人体制で要件定義を行っていただきます。

要件定義では、要件を確認の上、プロトタイプを作成しながら進めていきます。

・要件定義から本番リリースまでのプロジェクト参加経験あり
・ TableauでのBI開発経験あり
・Salesforce SalesCloudでの開発経験あり
・Apexによる開発経験あり
・VisualForceによる開発経験あり