データエンジニアの案件一覧

インフラサービス展開企業にて、スマートメーターから取得する大量データの可視化エラーを解消するプロジェクトです。クラウドデータプラットフォームを用いて効率的なデータ加工を行い、新たにデータマートを構築して可視化ツールとの連携を最適化していただきます。

◆主な業務内容

• 課題解消に向けた、Snowflake上での大量データの加工・処理
• 可視化ツールで円滑に読み込めるようにするためのデータマートテーブルの新規設計・作成
• 名古屋および大阪の拠点（出張対応を含む）でのオンサイト業務および関係者調整

– SQLを用いた実務経験
– データベースでのデータ加工・データ処理技術
– 各種調整や連携を円滑に行えるコミュニケーション能力
– 名古屋および大阪の双方の拠点への行き来（出張・直行直帰等）が対応可能な方

サポート終了を迎える物理サーバー環境からパブリッククラウド環境へシステムを移転するプロジェクトです。現行の運用機能（自動実行管理、データ連携・変換、データ蓄積基盤）をクラウドの提供する各種マネージドサービスへ刷新する方針に沿って、調査、移行設計、実装、検証から移行作業までを一貫して担当していただきます。

■業務内容

• 既存環境（自動実行定義、データ連携処理、データベース資産）の調査と移行プロセスの策定
• クラウド移行先サービスの選定および構成設計
• 自動実行ジョブ、データ連携処理、データ蓄積用の構造定義に関する移行設計および実装
• データの初期移行および差分同期に関する設計と実行
• 検証計画の策定、および各種テスト（結合・性能・受入）の推進
• 本番移行計画の立案、移行作業の遂行、および運用プロセスの設計と引き継ぎ
• 複数の関連部門や外部パートナーとの連携、進捗管理および課題解決の推進

– 物理環境からパブリッククラウド環境への移行プロジェクトにおける設計から本番稼働までの実務経験
– 自動実行管理システム（ジョブスケジューラ等）の運用または移行に関する実務経験
– データ連携・変換を行うETLツールを用いた開発または移行に関する実務経験
– 大規模データ蓄積基盤（DWH等）の設計または移行に関する実務経験
– クラウド環境における各種インフラサービスやマネージドサービス（オブジェクトストレージ、アクセス権限管理、ネットワーク、データ処理等）の実務経験
– 複数の関係者との調整や課題管理を主体的に推進できるコミュニケーション能力

データ分析プラットフォームを活用した、大規模データの統合および分析環境の構築支援をご担当いただきます。

主な業務内容

• 統合データプラットフォームを用いたデータパイプラインの設計・構築
• さまざまなデータソースからのデータ統合および分析用データマートの作成
• クラウド環境と連携したデータ分析基盤の運用・最適化支援

– 統合データプラットフォーム（Databricks等）を用いたデータ統合およびデータ分析の実務経験
– 主要クラウドサービス（AWS/GCP/Azure等）のデータ分析ソリューションを用いた開発・運用実務経験

販売管理システムの開発プロジェクトにおいて、データ領域の専門性を活かした技術サポートを担当いただきます。

主な業務内容

• データ利活用に向けた技術的なアドバイザリおよび実務支援
• 業務要件に基づいたデータ構造の検討支援

■環境■
C#、SQLServer

– 財務・会計系システム開発プロジェクトへの参画経験、および関連する業務知識
– 特定の製品に限定されない、幅広いBIツール（データ可視化ツール）の選定・活用に関する実務経験

• リアルタイムデータを活用するプラットフォームにおける、商業施設向けのデータ分析および可視化プロジェクトに携わっていただきます。

具体的業務

• クラウド型DWHやデータ変換ツールを用いたデータマートの設計およびバッチ処理の構築
• BIツールを用いたダッシュボードのロジック設計および運用管理

– BIツールを用いた可視化システムの設計および開発実務経験
– SQLを用いたデータ加工およびデータマート設計の実績
– 自律的な課題発見スキルおよび対外的な調整・コミュニケーション能力

• 金融機関における決算業務（国内基準および国際会計基準）の自動化を目指すプロジェクトです。
• 現在、国内基準向けのシステムはテストフェーズにあり、並行して国際基準対応の仕組みを新規に立ち上げます。
• 大量データを効率的に処理するためのETL処理を実装し、後続の各システムへデータを橋渡しする仕組みの設計から開発までを担います。

◆開発環境の傾向

• インフラ: AWS環境（AWS Glue, Amazon Redshift等）を活用したデータ基盤
• アプリケーション: Pythonを用いた開発、およびPySparkによる大規模データ分散処理

– ETL開発経験、Python

• 組織横断で利用されるデータサービスの改修および最適化を支援します。
• 既存のワークフロー管理環境からManaged Airflowへの移行作業を主導します。
• 分析に必要となるデータの調達から、システムの実装・リリース、提供後の運用・保守までを一貫して担当します。

◆主な業務内容

• データベースの操作およびApache AirflowからManaged Airflowへの移行対応
• データパイプラインの実装、リリース、および運用保守業務

– SQLを使用した業務経験
– Webシステム開発経験（Pythonだと尚可）
– コミュニケーション力

• Amazon QuickSightを用いたBI画面開発（要件定義〜リリース）
• BI導入・活用におけるアドバイザリー対応

– Amazon QuickSightでのBI画面開発経験（要件定義〜リリース）

• AWSおよびSnowflakeを活用して構築されたデータ基盤の開発・保守業務
• 製造業界向けデータ利活用プラットフォームの安定運用と機能拡張

– Apache Iceberg Table / Catalog および Iceberg から Snowflake への連携に関する知見
– 日本語：ネイティブレベル、英語：読み書きレベル