Dataflowの案件一覧

過去に募集したエンジニア、データサイエンティスト、マーケターの案件を中心に掲載しています。
非公開案件を多数保有していますので、ご希望のイメージに近い案件をクリックして無料サポートにお申込みください。
専門コンサルタントがヒアリングを通じて最適な案件をご提案いたします。
単価や稼働日数などの条件面についてもお気軽にご相談ください。

該当件数:3件

Dataflowの案件を探す

案件内容

各種施策の起点となるデータ分析基盤の構築や、データを利活用した機能の開発、ならびにそれらの運用を担当します。
拡張余地のあるプラットフォームであり、柔軟な環境下での設計・構築が可能なため、スキルを発揮しながら十分な実績を積むことができます。
業務内容の一例
・データパイプラインの構築
主にDWHへデータを集約するデータパイプラインを構築します。

  • データパイプラインの一例
  • クラウドストレージ上のファイルをDWHに取り込む
  • 外部APIからデータを取得し、DWHに取り込む
  • DWHに取り込んだデータを基に、目的に応じたデータマートの作成を行う
  • システムのアクセスログをリアルタイムにDWHに取り込む
  • 使用しているサービス
  • パブリッククラウド(AWS/GCP/Azure等)のワークフロー管理、分散処理、サーバーレス実行基盤など
    ・データの活用
    DWHに集約したデータを基に、推薦機能などの開発や改善を行います。
  • 機能の一例
  • 取り扱いデータの推薦機能向けデータ作成
  • ランキングデータの集計・作成
  • 一覧画面等の表示順最適化
  • 作成したデータをアプリケーションへ連携する機能(バッチ処理・リアルタイム通信)
  • 使用しているサービス
  • パブリッククラウド(AWS/GCP/Azure等)の機械学習プラットフォーム、データ分散処理、コンテナ実行環境、NoSQLデータベースなど
    補足事項
    ・事業貢献の実感を持ちながら業務を進めたい方
    ・仮説検証を通じて改善を重ねるのが好きな方
    ・メリハリをつけて業務に取り組みたい方
    ・スピード感をもって業務を推進したい方
    ・自らの意思を持ち、妥当性のある業務に取り組みたい方
必須スキル

– クラウド環境(AWS/GCP/Azure等)でのDWH、データパイプライン、データ抽出・変換・ロード処理などの設計・開発および運用経験
– DWH製品およびワークフロー管理ツールの実務利用経験
– Pythonおよびデータベース言語(SQL等)の利用経験

案件内容

モビリティ事業を展開している企業にてデータアーキテクト業務をお願いいたします。

・データ整備業務
 プロダクトへの新規機能追加時のログ・テーブル設計
・データに不具合が発生した場合の調査・復旧
・新しいデータマートの設計・構築
 データ基盤の整備やETL/ELT開発等も
発生する可能性有

必須スキル

・SQL
・Python
・Dataform、Airflow
・Docker
・ログ、テーブル設計スキル
・ビジネス部門との要件調整スキル
・アナリストとの技術的対話力

案件内容

【事業概要】

広告効果予測AIを活用した新しいクリエイティブ制作プロセスを確立し、高品質で広告効果の高い当たりクリエイティブの大量制作・納品・配信を可能にすることを目指します。
【業務概要】

新しいクリエイティブ制作プロセスを実現するための、クリエイティブ制作画面の新機能開発と保守運用を担当していただきます。
【業務詳細】

- 効果予測 API のリファクタ・アップデート ( Python, GKE, dbt )

- 新機能開発におけるアーキテクチャ選定、設計、実装 ( Python, GoogleCloud )

- 機械学習基盤、推論基盤のリファクタ・アップデート ( Python, Kubeflow, Vertex AI )

- データ処理パイプライン設計・実装 ( dbt, Embulk, Argo workflow, Dataflow )

- 自動テスト・デプロイ・インテグレーションの拡充 ( CloudBuild )

- サービス保守運用 ( アラート対応、再発防止案策定 )
【文化】

- 設計の見直しやリファクタを適切に行い、高いシステム品質と事業開発力の維持・強化を目指します

- 社内クリエイターから制作プロセスをヒアリングし、制作効率を改善するための施策をメンバーと議論をしながら設計・開発します
【利用ツール/言語】

Vue, TypeScript, Golang, Python, BigQuery, GKE など

必須スキル
・Webアプリケーション・ソフトウェア・DB設計、開発保守経験3年以上
・SQL を用いた DB 利用やデータ分析経験
・GAE, GKE, BigQuery, Dataflow 等の各種 GCP サービスの技術選定や利用経験
・GitHubでのPull Requestを利用した開発フロー経験

検索結果3件中1-3件