Hadoopの案件一覧

大規模データ収集基板構築（オンプレにて構築）に伴い、アプリケーションの新基板への移行/アプリケーションのコンテナ化を支援いただける方を募集します。
アプリケーションの設計、開発、テストがメイン業務となります。アプリ設計、データ投入、環境利用等で分散FS（Hadoop）の構成について考慮する必要があるため、Hadoop環境の利用経験がある方を優遇させていただきます。
RDBからデータ取得を行うアプリケーションをDWH(Hadoopベース)からデータ取得を行うように改修、改修のための設計、開発、テスト

新基盤移行に伴う運用面対応（システム運用設計や手順整備、セキュリティ設計等）

大規模データ収集基板構築（オンプレにて構築）に伴い、システム検証/設計、ミドルウェア選定、パフォーマンス検証等にご協力いただける方を募集します。
・新環境（分散FS環境）向け機能開発、既存機能の新環境向け修正

・アプリケーションの改修、機能追加

・新基盤移行に伴う運用面対応（システム運用設計や手順整備、セキュリティ設計等）、運用機能の開発

開発環境

・Java・Hadoop(Cloudera)・Apache kafka・Apache spark・Kubernetes/OpenShift/vCenter

[ポジション]：AIエンジニア

自社で探索型BIツールを開発しており、そこにおける人材を募集
・検索・機械学習エンジンの開発・実装、および性能改善
・自然言語処理を使用した検索エンジンの開発
・大規模分散処理を伴う汎用的な機械学習エンジンやモデルの開発

以下のいずれかを得意としていて、その他の分野に対しては、キャッチアップしていく意欲がある方
・機械学習、コンピュータサイエンス、数学の専門的な知識
・自然言語処理とRDBに関する基礎知識
・何らかのサービス・プロジェクトにおけるAPIやシステムの開発、および運用経験
・データの探索、特徴量の変換、モデルの導出、システムの実装、パフォーマンス評価の一通りの行程をPythonを使用して実施できるスキル

・主に大規模データを処理するためのクラウドインフラ
・アプリケーションソフトの構築からオーディエンスデータとの紐づけやデータ配信を行うソフトウェア開発までを一貫で担っているチームに所属し、
ビッグデータ基盤システムの構築、開発、保守を行い、データの加工(ETL)等をご担当いただきます。
・インフラエンジニアやアプリケーションエンジニアといった垣根なく、ご活躍いただくお仕事になります。

・アプリケーション開発経験3年以上
・SQLを使ったDBプログラミングの開発経験
・Python、PHP、JAVA、Golangのいずれかの開発経験1年以上
・AWS等のパブリッククラウドを利用したサービス開発・運用経験
・Gitなどのソースコード管理ツールの使用経験

※以下全てを満たしている必要はありません 1. Pythonで開発経験豊富な方 　-要件定義、設計経験があると尚可 2. Java or Scalaで開発経験豊富な方 　-要件定義、設計経験があると尚可 　-マルチスレッドプログラミング経験があると尚可 　-高パフォーマンスを要する案件での開発経験があると尚可 3. シェルスクリプトが書ける方 4. Hadoop運用作業経験があると尚可 5. Spark開発経験があると尚可 6. Perlスクリプトが書けると尚可

1.Pythonを用いたDBアクセスを行うプログラムの作成・運用の経験 2.Pythonで書いたプログラムのレビューワーの経験 3.Pythonで書いたプログラムのデプロイの実施した経験 4.Gitの開発フローの実施した経験(ex:git-flow/github-flow)

・英語での業務対応 ・Webシステム開発経験（PHPベター）、Javascript、HTML、CSS

Python、Hadoop、Spark、関数型言語（Scala、Erlang）の経験 ビジネスレベルの英語能力 スクラムでの開発経験

・Java、Javascript、MySQLを用いたアプリケーション開発（3年以上） ・基本設計～テスト（一人称対応） ・Hadoopの技術をキャッチアップや、ビッグデータ関連の技術習得に意欲的に取り組める方

・ウェブアクセス解析の経験
・ウェブサイトの分析経験
・SQL経験
・PHP経験