New【AIエンジニア】データ汚染/仕様変更検知機構の運用の求人・案件

リモート・常駐 併用

※本サイトでは募集中の案件だけでなく過去の募集案件を掲載しております。
※単価や稼働日数など条件面についても無料サポート登録よりお気軽にご相談ください。
※当社が保有する非公開案件等からスキルに適した案件をご提案いたします。

案件概要

職種
案件内容

・Airflow及びSlackAPIを用いたデータ異常の通知環境の構築/運用
・Streamlitを用いた通知先、通知条件の管理アプリの運用
・dbt testを用いたデータの汚染検知機構の構築/運用

■データ仕様変更検知機構の運用
データオーナが提供する仕様変更予定情報の集計及びデータ利用者に対する通知の実施。
仕様変更予定はsnowflake上のデータテーブルにて展開されるため、Airflowを用いて集計結果の通知を行う。

通知希望者の情報はStreamlitアプリを用いて収集する。

■dbt testを用いた汚染検知
社内snowflake内に存在する安定性の低いデータテーブルに対する汚染/異常検知をdbt testを用いて行う。
既存のテーブルに対して品質保証ポリシーの設計や検討を行い、品質に対するアラート通知を行う環境を構築する。

必須スキル
・dbtの基本的な使用方法
・dbtのベストプラクティス及びデータパイプラインの設計知識
・既存のdbtテストライブラリに関する知識
稼働率 100%
面談回数 1回
稼働日数 週5日
募集人数 1人

関連する案件

お仕事を開始するまでのステップ

案件のご紹介はもちろん、案件参画後も担当コンサルタントより定期的なフォローを実施いたします。

案件お問い合わせ

必須項目

*必須項目です。

*必須項目です。

*年を入力してください。

*月を入力してください。

*日を入力してください。

ハイフン無しでご記入ください

*携帯電話番号を正しく入力してください。

*メールアドレスを正しく入力してください。

*項目を選択してください。

*項目を選択してください。

*希望稼働条件を選択してください。

*職種を選択してください。

*経験年数を選択してください。

経歴書 5MBまで
選択されていません

当社の個人情報保護方針および利用規約に同意の上、送信してください。


個人情報の取り扱い、利用規約に同意してください

戻る