Snowflakeの案件一覧

■背景
・募集部署はデータ基盤&AI・BI&運用を一気通貫で担っており、
　現在エンドクライアントにDWH構築を上流から提案中
⇒プロパーを含めてリソース不足が目下課題
⇒現在お客様からの引き合いも増えており、提案活動のリソースも不足
■クライアント支援範囲(該当部署)
・データ基盤構築、機械学習システム構築/精度向上、時系列データ予測/異常検知、自然言語(テキスト)解析、画像認識
■エンドクライアント
・建築・製造・医療など様々
■想定業務
・蓄積したデータをBIやAIで活用するためのプラットフォームの設計・構築が主業務となる。
・直近は下流案件の受注確度が高い(下流工程)

※下記スキルによって相談可・受注次第で上流も任せたい
※提案活動・プリセールス業もあり
〇顧客案件におけるデータ基盤構築支援_（概念設計・アーキテクト）
〇実装に向けたパイプライン設計・マート設計
〇DWH構築(Snowflakeがj確度高)
〇ドキュメント作成(アーキテクト構成図・設計書・仕様書)
○提案活動・プリセールス

購買・見積システム開発の開発をお任せいたします。

■背景
・募集部署はデータ基盤&AI・BI&運用を一気通貫で担っており、
　現在エンド会社にDWH構築を上流から提案中
⇒既契約のエンド会社より技術要件に落とし込める英語できる方を求められている(5月末ぐらいまでに決定希望)
⇒技術サポートで既契約中(Snowflake環境構築)

■当社クライアント支援範囲(該当部署)
・データ基盤構築、機械学習システム構築/精度向上、時系列データ予測/異常検知、自然言語(テキスト)解析、画像認識
■想定業務
・プロパーの方との連携(Snowflake実装)
・英語でのやり取り(技術要件に落とし込み)
・ドキュメント作成(アーキテクト構成図・設計書・仕様書)
・技術サポート

※基本的にプロパー(Snowflake環境構築出来る方)がいるが、自身が構築・技術サポートしていくのも想定業務

・DWH構築経験(特にSnowflake)
・上流(要件定義・提案)の経験
・データフロー/マート設計
・ビジネス英語(クライアント折衝)

※全て満たしていない場合でも相談可(英語は必須)
※DWH上流経験があれば幅は広がります
※DWHサービス活用は必須

自動車製造会社にて社内向けWEBシステムのリプレイスをお任せします。

【作業範囲】
・基本設計 ～ 開発・単体
・現行サーバ保守切れに伴う、WEBアプリのリプレイス
・リプレイスに伴うFWの変更（Apache Wicket ⇒ Spring）

案件概要　：業務分析システムの運用保守フェーズにおいて、システムの維持・改善・拡充を目的とする。
作業内容　：ツール導入、性能分析検討、及びそれに基づいたアーキ検討

■概要

• 保持データのハッシュ化（Snowflake、Azure Synapse、Azure Blob）
  　- 処理の改修：I/F・バッチ処理（主にデータ加工・ロード／アンロード処理）（Python、SQL）
  　- 機能の新規開発：ハッシュ化・復号ツール（Python、PHP、Shell）

■詳細
クライアントグループPOINTのデータ（主にグループ全体のPOS明細およびPOINTの会員情報）分析基盤において、個人情報等に該当するID情報をハッシュ化するため、処理方式およびデータ保持方式の変更を設計・実装。
想定される影響範囲について、I/F処理、バッチ処理、DL/DWH、Webアプリ、分析ツールが想定される。

■概要

• Webアプリ／API処理の改修（Kotlin、PHP）
  　- 分析ツール（SPSS）の修正等対応

■詳細
クライアントグループPOINTのデータ（主にグループ全体のPOS明細およびPOINTの会員情報）分析基盤において、個人情報等に該当するID情報をハッシュ化するため、処理方式およびデータ保持方式の変更を設計・実装。
想定される影響範囲について、I/F処理、バッチ処理、DL/DWH、Webアプリ、分析ツールが想定される。

エンドクライアント内にある散らかったデータ(BtoB向けの受発注や契約関係のデータ等)を連携しsnowflakeに蓄積してデータ利活用を推進していきたいと考えております。

業務スコープは以下を想定
・Snowflakeを利用したデータ蓄積+活用。
・連携されたファイルなどのデータをSnowflakeにてデータを蓄積。
・蓄積後ユーザに使いやすいように加工し活用してもらうよう設計・開発を行う。

【主なスキル技術や環境】
AWS(Lambda等)
Snowflake
Python
SQL
GitやGithub
CI/CD

Javascript
GCP
Informatica Intelligent Cloud Services（IICS）

その他(ツール作成等)
Powershell
bash
Excelマクロ

PJTの進め方
毎朝大手Slerの開発チームとクライアントの開発メンバーを交えた朝礼を行なっております。
必要に応じてエンド企業との打ち合わせが日中発生する想定です。

連携されたファイルなどのデータをSnowflakeにてデータを蓄積
蓄積後ユーザに使いやすいように加工し活用してもらうよう設計・開発を行う。
また、基盤構築も併せて実施するが基盤チームへの作業依頼が主な作業となる。
クラウド環境ではあるもののNW等の設定依頼が多く発生するため、オンプレでの
基盤構築経験があった方が良い。

グローバルブランドとして国内外に展開している某小売企業においてデータエンジニア業務をご担当いただきます。
少人数で運用出来る整ったデータ基盤を目指して、様々な技術やノウハウを積極的に試行していく予定です。

想定業務：
・データパイプライン清流化設計、実装
・データ項目定義
　-データカタログ構築
　-プロトタイピング（OpenMetadata）
・その他改善活動

【環境】
DWH：Snowflake
ETL：AWS Glue／dbt
BI：Looker／Tableau