Hive Sparkの求人・案件
掲載案件数9件 1ページ目
【Scala/Java/Python/JavaScript/SQL/CSS/HTML/Ruby】DMPおよびターゲティングデータ管理システム開発
単価: ~800,000円/月
エリア 東京都/表参道
契約 業務委託(フリーランス)
| 言語 | Scala / Java / Python / JavaScript / SQL / CSS / HTML / Ruby |
| フレームワーク | Rails / React / Spark |
| データベース | PostgreSQL / Redis / Hive |
| ツール | Linux / Git / Docker |
| 仕事内容 | ・数万QPSの配信やビックデータに関わる、 ターゲティングデータ管理やDMPなどに携わって頂きます。 ・API開発や外部システムのデータ連携機能などの開発で、 設計から幅広く担当して頂きます。 ・ご経験がある方は、ミドルウェアやインフラの構築、 およびリニューアルなども依頼されることがございます。 ※担当範囲は、スキルや経験および進捗状況により変動いたします。 |
| 求めるスキル | ・Scala、Java、Python、JavaScriptいずれかの実務経験 【下記から2点必須】 ・設計の実務経験 ・Gitでのチーム開発の実務経験 ・インフラの実務経験 ・ミドルウェアの実務経験 ・Dockerの実務経験 ・Kubernetesの実務経験 ・広告システム開発の実務経験尚可スキル・Redis、PostgreSQL、k8s、Ansibleの実務経験 ・IaCの実務経験 ・Hive、Spark、Presto、Athenaの実務経験 ・Railsの実務経験 ・React.js、redux-sagaの実務経験 ・リアルタイム性のあるデータ処理の実務経験 ・データモデリングやSQLクエリ構築の実務経験 ・アクセス数やデータ量が多いサービスの開発や運用の実務経験 ・レビューの実務経験 ・リーダーやリードエンジニアの実務経験 ・OSSなどへのコントリビュート経験※上記に似た経験やスキルをお持ちであれば申し込み可能なケースもございます！まずはお気軽にご相談ください！ |
【Ruby/Python/JavaScript/PHP/Java/SQL/CSS/HTML】DMP/ダッシュボード開発
単価: ~800,000円/月
エリア 東京都/表参道
契約 業務委託(フリーランス)
| 言語 | Ruby / Python / JavaScript / PHP / Java / SQL / CSS / HTML |
| フレームワーク | Rails / React / Spark / Redux |
| データベース | PostgreSQL / Hive |
| ツール | Linux / Git / Docker |
| 仕事内容 | ・数万QPSの配信やビックデータに関わるDMPのダッシュボード開発に携わって頂きます。 ・設計から幅広く担当して頂きます。 ・主な業務は下記の通りです。 -管理画面開発 -バックエンド開発 -API開発 -各種システム（JavaScriptやSDKなど）によるデータ収集と集計処理 -大規模データを利用するためにある中間の集計処理 -データ加工処理 -処理の定期実行の開発 -処理タイミングの負荷を考えた運用 ※担当範囲は、スキルや経験および進捗状況により変動いたします。 |
| 求めるスキル | 【下記から4点必須】 ・Ruby、Python、JavaScript、PHP、Javaいずれかでの開発の実務経験 ・AWS、GCP、Azureiいずれかの実務経験 ・MapReduce、Hadoop、Hive、Sparkいずれかの実務経験 ・設計の実務経験 ・APIの開発もしく他サービスやAPIとの連携を利用した開発の実務経験 ・Gitでのチーム開発の実務経験尚可スキル・Ruby on Railsの実務経験 ・React.js、Redux、redux-sagaの実務経験 ・Dockerの実務経験 ・インフラやミドルウェア周りの実務経験 ・広告システム開発の実務経験 ・リアルタイム性のあるデータ処理の実務経験 ・データモデリングやSQLクエリ構築の実務経験 ・大規模な開発や分析の実務経験 ・アクセス数やデータ量が多いサービスの開発や運用の実務経験 ・レビューの実務経験 ・リーダーやリードエンジニアの実務経験 ・OSSなどへのコントリビュート経験※上記に似た経験やスキルをお持ちであれば申し込み可能なケースもございます！まずはお気軽にご相談ください！ |
【Python/CSS/JavaScript/HTML/Ruby】広告システム/インフラ設計構築運用
単価: ~800,000円/月
エリア 東京都/表参道
契約 業務委託(フリーランス)
| 募集職種 | サーバーエンジニア / インフラエンジニア |
| 言語 | Python / CSS / JavaScript / HTML / Ruby |
| フレームワーク | Rails / React / Spark |
| データベース | PostgreSQL / Hive |
| ツール | Linux / Jenkins / Docker |
| 仕事内容 | ・数万QPSの配信やビックデータに関わるDMPにおいて、 AWSをメインとしたインフラに携わって頂きます。 ・設計から幅広く担当して頂きます。 ・主な業務は下記の通りです。 -データ基盤のインフラ運用 -サーバの設計や構築および運用 ※担当範囲は、スキルや経験および進捗状況により変動いたします。 |
| 求めるスキル | ・AWSの実務経験 【下記から2点必須】 ・Webサービスにおけるインフラの設計や構築および運用の実務経験 ・Hadoopクラスタ運用の実務経験 ・EMR運用の実務経験 ・PythonやJSONの実務経験 ・ビッグデータのデータストア管理の実務経験 ・アクセス数やデータ量が多いサービスにおけるインフラの実務経験 ・サーバ運用監視の実務経験尚可スキル・EC2、EMR、AWS Data Pipeline、Lambda、CloudWatch、S3、ECSの実務経験 ・ubuntu、debian、centos、alpineの実務経験 ・Apache Kafkaの実務経験 ・Hive、Spark、Flink、Jenkins、Dockerの実務経験 ・On premise data centerの実務経験 ・広告システムの実務経験 ・レビューの実務経験 ・リーダーやリードエンジニアの実務経験 ・OSSなどへのコントリビュート経験※上記に似た経験やスキルをお持ちであれば申し込み可能なケースもございます！まずはお気軽にご相談ください！ |
【Python/CSS/JavaScript/HTML/Ruby】広告システム/インフラ設計構築運用
単価: ~800,000円/月
エリア 東京都/表参道
契約 業務委託(フリーランス)
| 募集職種 | サーバーエンジニア / インフラエンジニア |
| 言語 | Python / CSS / JavaScript / HTML / Ruby |
| フレームワーク | Rails / React / Spark |
| データベース | PostgreSQL / Hive |
| ツール | Linux / Jenkins / Docker |
| 仕事内容 | ・数万QPSの配信やビックデータに関わるDMPにおいて、 AWSをメインとしたインフラに携わって頂きます。 ・設計から幅広く担当して頂きます。 ・主な業務は下記の通りです。 -データ基盤のインフラ運用 -サーバの設計や構築および運用 ※担当範囲は、スキルや経験および進捗状況により変動いたします。 |
| 求めるスキル | ・AWSの実務経験 【下記から2点必須】 ・Webサービスにおけるインフラの設計や構築および運用の実務経験 ・Hadoopクラスタ運用の実務経験 ・EMR運用の実務経験 ・PythonやJSONの実務経験 ・ビッグデータのデータストア管理の実務経験 ・アクセス数やデータ量が多いサービスにおけるインフラの実務経験 ・サーバ運用監視の実務経験尚可スキル・EC2、EMR、AWS Data Pipeline、Lambda、CloudWatch、S3、ECSの実務経験 ・ubuntu、debian、centos、alpineの実務経験 ・Apache Kafkaの実務経験 ・Hive、Spark、Flink、Jenkins、Dockerの実務経験 ・On premise data centerの実務経験 ・広告システムの実務経験 ・レビューの実務経験 ・リーダーやリードエンジニアの実務経験 ・OSSなどへのコントリビュート経験※上記に似た経験やスキルをお持ちであれば申し込み可能なケースもございます！まずはお気軽にご相談ください！ |
【Python/Ruby/Scala/Java/CSS/JavaScript/HTML】広告システム/機械学習/データマイニング
単価: ~800,000円/月
エリア 東京都/表参道
契約 業務委託(フリーランス)
| 言語 | Python / Ruby / Scala / Java / CSS / JavaScript / HTML |
| フレームワーク | Rails / React / Spark |
| データベース | PostgreSQL / Hive |
| ツール | Linux / GitHub |
| 仕事内容 | ・月間で数億リクエストある広告システムで、 ログ、各種デモグラフィック情報、アクション情報などをもとに、 データマイニングおよび機械学習に携わって頂きます。 ・設計から幅広く担当して頂きます。 ※担当範囲は、スキルや経験および進捗状況により変動いたします。 |
| 求めるスキル | 【下記から1点必須】 ・Pythonの実務経験 ・Rの実務経験 ・Sparkの実務経験 ・Hadoopの実務経験 ・Hiveの実務経験 ・データマイニングの実務経験 ・機械学習の実務経験 ・DMP構築の実務経験尚可スキル・確率統計などの知識 ・KaggleやKDD Cupの経験 ・カンファレンスでの論文発表経験 ・Ruby、Scala、Javaの実務経験 ・インフラの実務経験 ・広告システム開発の実務経験 ・インフラやミドルウェア周りの実務経験 ・大規模な開発や分析および分散処理の実務経験 ・アクセス数やデータ量が多いサービスの開発や運用の実務経験 ・GitHubでのチーム開発の実務経験 ・レビューの実務経験 ・リーダーやリードエンジニアの実務経験 ・OSSなどへのコントリビュート経験※上記に似た経験やスキルをお持ちであれば申し込み可能なケースもございます！まずはお気軽にご相談ください！ |
【Ruby/Python/JavaScript/TypeScript】データマネジメントプラットフォーム開発
単価: ~850,000円/月
エリア 東京都/虎ノ門
契約 業務委託(フリーランス)
| 募集職種 | システムエンジニア |
| 言語 | Ruby / Python / JavaScript / TypeScript |
| フレームワーク | Rails / React / Spark |
| データベース | PostgreSQL / Hive |
| ツール | GitHub |
| 仕事内容 | ・クライアント向けDMPの開発に携わります。 ・具体的には下記の作業を想定しております。 - 機能機能要件を基に、設計、実装、テスト、リリースまでの一連の開発作業 - Railsでのバックエンド開発 - reactでのフロントエンド開発 - Hive, Presto, BigQueryでのデータ分析機能の開発、パフォーマンスチューニング - 既存AWSクラウドの運用、保守、改善、機能開発 |
| 求めるスキル | ・HiveやSpark等の分散処理フレームワークを 用いた開発経験 ・RubyやPython等での Webアプリケーションの開発経験3年〜 ・クラウドでの開発経験 ・GitHub を利用したチーム開発経験尚可スキル・Ruby on Railsでの開発経験 ・Reactでの開発経験 ・GCPでの開発経験 ・AWSでの開発経験 ・データ分析機能の開発経験※上記に似た経験やスキルをお持ちであれば申し込み可能なケースもございます！まずはお気軽にご相談ください！ |
【Python/SQL/C++】広告配信プロダクトプラットフォーム開発
単価: ~900,000円/月
エリア 東京都/虎ノ門
契約 業務委託(フリーランス)
| 募集職種 | データベースエンジニア / データサイエンティスト |
| 言語 | Python / SQL / C++ |
| フレームワーク | Spark |
| データベース | Hive / BigQuery |
| 仕事内容 | ・自社広告配信プロダクトの100億レコード以上/日のログを分析し 広告配信の最適化する業務に携ります。 ・KPI（CPCなど）最適化の改善及び運用に携わります。 |
| 求めるスキル | ・下記いづれかでの分析経験 -Python、SQL、HiveQL、Spark、BigQueryなど ・既に機械学習で実装されたものを更に改善した経験 ・関係者へヒアリングを行いドキュメント化しPJを推進した経験 ・稼働中のプロダクトに対してシステム面及びビジネス面の 課題特定及びKPI改善をした経験 ・オンプレ環境で稼働中のプロダクトに対する1年〜の開発運用経験尚可スキル・C++での開発経験 ・サーバーサイドフレームワークでの開発経験1年〜 ・アドテクの開発経験 ・大規模データの分散処理経験※上記に似た経験やスキルをお持ちであれば申し込み可能なケースもございます！まずはお気軽にご相談ください！ |
【Java/HTML/CSS/Python/Ruby/Scala】レコメンドシステム開発運用
単価: ~800,000円/月
エリア 東京都/秋葉原
契約 業務委託(フリーランス)
| 言語 | Java / HTML / CSS / Python / Ruby / Scala |
| フレームワーク | Spring / Struts / Spark |
| データベース | MySQL / Hive |
| ツール | Linux / Windows / Jenkins |
| 仕事内容 | ・大規模データベースシステム/レコメンドシステムの運用及び運用改善に携ります。 また、システムに付随する管理ツールや自動化スクリプトの開発もご担当いただきます。 |
| 求めるスキル | ・Javaでの開発経験3年〜 ・Tomcat、Spring Framework構成のシステム開発の経験 ・HTML、CSS、Javascriptの知識 ・Javaでのバッチ処理開発経験 ・Hadoop、HBase、Hive、Spark等の知見 ・シェルスクリプト等を用いて基本的なオペレーション経験尚可スキル・Ansible、Chef、Jenkinsなどの利用経験 ・バージョン管理システムやパッケージ管理システムの利用経験 ・Python、Rubyなどのスクリプト言語での開発経験※上記に似た経験やスキルをお持ちであれば申し込み可能なケースもございます！まずはお気軽にご相談ください！ |
【Python/SQL】広告配信システム配信データ分析
単価: ~850,000円/月
エリア 東京都/渋谷
契約 業務委託(フリーランス)
| 言語 | Python / SQL |
| フレームワーク | Spark |
| データベース | Hbase / Hive |
| ツール | Linux |
| 仕事内容 | ・広告配信システムにおいて、下記の配信データ分析に携ります。 -数値に基づいた意思決定をするためのデータ分析 -新規配信手法のプロトタイプ作成・提案 -データ可視化システムでのレポーティング・プレゼンなど |
| 求めるスキル | ・分析要件定義の経験 ・統計学の知見 ・R、Python、Sparkなどでのデータ分析経験 ・DBに対する知識とSQLの利用経験 ・レポーティングとプレゼンテーションの経験尚可スキル・Hadoop、Hbase、Hiveなどを利用したデータ分析経験 ・Linux上での分析経験 ・D3.ｊｓなどのデータ可視化ライブラリの利用経験※上記に似た経験やスキルをお持ちであれば申し込み可能なケースもございます！まずはお気軽にご相談ください！ |
Hive Spark求人・案件に関するよくある質問
Hive Spark案件・求人は何件ありますか？
案件評判ではHive Spark求人を9件掲載しています。募集求人は日々変化しており自分の希望にあったスキルなどからお仕事をご紹介します。
