Apache Sparkの求人・案件一覧

該当件数:10

エンジニア、データサイエンティスト、マーケターの案件情報をご紹介。業務委託、派遣を中心に非公開求人を多数保有しています。
単価や稼働日数など条件面についてもお気軽にご相談ください。

Apache Sparkの案件を探す

案件内容
■業務内容
製造メーカー系会社のデータ処理基盤の設計・構築
→ 大量のログデータを蓄積するクラウド環境及び、製品に埋め込むクライアントの開発運用
必須スキル

・クラウド環境の構築経験・知識(AWSなど)
・分散処理の経験・知識 (Spark、分散処理)

尚可スキル

・設計から実装までできる
・コミュニケーション能力
・能動的に動けること

担当者 坂西

おすすめコメント

これまでの経験を活かし、ご活躍いただきたいです!ぜひ一度、お声がけください。

案件内容
概要
国内メディアのデータを収集したDMPをを活用して、様々な貢献価値につながるアルゴリズムの開発の実施を行う
業務目的
施策で使われるモデルやアルゴリズムを実装し、運用すること。
部門内のインフラエンジニア・アプリケーションエンジニアと協働して、本番システムを開発・運用すること。
プロジェクト例
● 横断データを活用した、カスタマーのライフイベントタイミング予測
● カスタマー属性の予測(年収、職業など)
必須スキル

● 基本的な数学(解析学・線形代数学・確率論)の理解
● 基本的な統計学・機械学習の理解
● Python / Rなどでの統計分析・機械学習の実務経験2年以上

尚可スキル

● 非構造データを取り扱った経験(自然言語処理など)
● 数理統計・応用統計・機械学習・数学などの関連分野での学位・論文の投稿・学会での発表経験
● HadoopやSparkを用いた分散計算に関するスキル
● 大規模データ(数億レコード規模)の取扱経験
● クラウド環境(AWS / GCPなど)での分析環境の構築スキル

担当者 久永

おすすめコメント

弊社イチ押し案件です。気になった方は、ぜひお問い合わせください。

案件内容 モバイルアプリの解析・マーケティングツールの提供、 アプリの企画・戦略コンサルティングを行っている企業にて 以下の作業を行う。 ・分析に必要なデータパイプラインの構築や中間データの整備 ・統計的手法や機会学習等の技術を用いて設計されたアルゴリズムやモデルの実装
必須スキル

– 統計的手法や機械学習の技術を用いた機能の実装経験
MySQL、BigQuery、Hive、Spark などのデータストアの利用経験
– データ分析を行うパイプラインの設計およびその実装する能力

尚可スキル

– モバイルアプリやWEBマーケティングに関するデータパイプライン実装・運用経験
– Cloud ML Engineer などのML SaaS platformの比較・評価能力または活用経験
– Ruby on Rails により構築された Web アプリケーションの開発・連携経験

担当者 坂西

おすすめコメント

お持ちのスキルを存分に活かしていただけます!稼働率の相談もOK!

案件内容 ■業務内容 (1)Hive、Apache Spark、SQLなどを⽤いたデータ抽出、加⼯ (2)HDPコンポーネントを⽤いたデータ処理フロー構築、データ可視化 (3)Apache Spark MLlibなどを⽤いた機械学習アプリケーションの実装 稼 働:週2日~5日 相談可能 時 間:9:30 - 18:30(応相談) 服 装:ビジネスカジュアル・私服
必須スキル

・Scala(もしくはJava)の実装経験
・Hadoopエコシステムに関する知識(実務経験は問わない)

担当者

おすすめコメント

あなたのこれまでの経験でプロジェクトを加速していける環境です。まずはご連絡ください。

案件内容 AIやブロックチェーン等の最新技術を用いた、パッケージ製品への機能拡充を検討されており、 その研究開発のご支援となります。 具体的には、 ・機械学習等のAI機能を用いたグループウェア機能の最適化 ・OCR機能を用いた帳票処理自動化機能 ・ブロックチェーンを用いたBPM連携 等々がスコープとなっております。
必須スキル

・新技術の調査・利用のご経験がある方 ・下記はいずれか1つは必須  - Linux上でのOSSミドルウェア導入経験  - Restful API等を活用したマッシュアップでのアプリ開発   (設計、実装の双方をご経験されている)

尚可スキル

・Hadoop/Sparkを初めとした分散処理製品利用経験 ・機械学習利用経験 ・データアナリティクス経験 ・自然言語解析経験 ・ブロックチェーン利用経験

担当者 生澤

おすすめコメント

やりがいとスキルアップが可能な環境です。様々な経験が積める環境下です。

案件内容 データベース内ビッグデータの集計及び分析作業 データ分析システムの構築/分析データの評価/報告レポートの作成
必須スキル

・Unix /Linux OS の操作経験(2 年以上) ・SQL、Excel 等によるデータ加工経験 ・DBに関する基礎知識(データの読み書き、テーブル操作等)

尚可スキル

・Java 開発経験 ・クラウド(AWS等)関連の知識 ・システム設計(データ処理中心)の経験 ・分析レポート作成経験 ・HadoopやSparkの知見

担当者 坂西

おすすめコメント

開発経験を活かし、より上流から携われる仕事をしたい方歓迎です。お声がけください。

案件内容 上位リーダーのもとで作業頂くメンバーの方 領域:デジタルマーケティング領域 お客様:ECサイト
必須スキル

全てを網羅している必要はありません。 【機械学習】 ・AWS(EC2,S3)  EC2及びS3を利用した集計作業に困難がないこと ・Linux  Linux環境で苦なく集計作業ができること ・Redshift  列指向DBの特性および分散キーやソートキーについて理解していること ・SQL  分析関数(窓関数)が使用できること ・Apach Spark  分散処理による機械学習プログラムの実装を行うことができること、  もしくは調べながら習得することができること ・Python  Pandasを利用したプログラムを実装することができること ・マート設計/実装 パフォーマンスチューニングができること ・テーブル設計/実装 テーブル定義、ER図が書けること ・ジョブ設計/実装 DataPipeLine を使用できるとより良い ・Shell設計/実装 例外処理、エラー処理を作成できること 【アナリスト】 ・AWS(EC2,S3)  EC2及びS3を利用した分析作業に困難がないこと ・Linux  Linux環境で苦なく分析作業ができること ・SQL  分析関数(窓関数)が使用できること ・Python  機械学習のロジックをPythonで実装/検証できること ・機械学習  Pythonで書かれた既存のロジックを読み解くことができること検証結果を読み解くことができること

尚可スキル

【機械学習】 ・Tableau BIの概念を理解していること ・機械学習について概念を理解していること 【アナリスト】 ・Redshiftに対してクエリを発行して集計することができること ・受領データからTableauに読み込むためのデータ加工ができること ・テーブル定義、ER図が書けること ・スケジューラ―を用いたジョブ設計ができることが望ましい ・Shellの実装をできることが望ましい

担当者 坂西

おすすめコメント

スキルはもちろんのこと、コミュニケーション能力も活かせます。

案件内容 Webサイトへの導入、機能そのものの改修、データ分析などなど
必須スキル

・Scala言語 ・ApacheSpark経験者 (いずれか一方でも可)

尚可スキル

・ビックデータ関連の知見(Hadoop、分析ツールなど)がある ・レコメンド機能について知見がある ※ビックデータに興味がある、ビックデータの知見を得たいなど本件前向きに取り組んでいただける方

担当者 生澤

おすすめコメント

オススメ求人です。あなたの確かな技術力でプロジェクトを促進していただきたいです。

案件内容 パッケージ製品へのAI関連の機能の 拡充を検討されており、その開発のご支援となります。 具体的には、 ・機械学習を用いた処理の最適化機能 ・画像認識機能、OCR機能 ・音声での対話入出力機能 が初期スコープとなっております。
必須スキル

(下記のいずれか1つ必須) ・機械学習を用いた分析の実施経験 ・画像認識もしくはOCRの実装経験 ・音声での対話システムの構築経験

尚可スキル

・Hadoop/Sparkの利用経験

担当者 坂西

おすすめコメント

弊社イチ押し案件です。気になった方は、ぜひお問い合わせください。

案件内容 業務内容:世界中から集まる製薬データの分析 メインフレームシステムのダウンサイジング
必須スキル

Python、Hadoop、Spark、関数型言語(Scala、Erlang)の経験 ビジネスレベルの英語能力 スクラムでの開発経験

担当者

おすすめコメント

あなたのスキルが活かせます。良い出会いになると思います。

検索結果10件中1-10件