エンジニア・デザイナー専門・案件ベースの口コミサイト

案件評判

Python、データ分析エンジニア【SQL/Python/Shell/Go言語/Java】

単価600,000~700,000円/月
契約形態業務委託
エリア東京都/新橋
職種・ポジション
職務内容
・某ゲーム企業様にて運用中のデータ分析基盤(Redshift)の、Google Cloud環境への移行に携ります。 ・Google Cloud環境では、DWHとしてBigQueryを利用し、 データパイプラインにはGoogle Cloudのマネージドサービスと、データ変換ツールdbtを使用する想定です。 (上から優先度が高い順) 1.バッチ処理コード移行(Java(Spling Boot)→ Google Cloud Composer + Google Data Fusion + dbt) (実装、単体テスト、結合テスト、システムテスト) 2.SQL構文修正(Redshift(PostgresSQL) → BigQuery) (実装、単体テスト、結合テスト、システムテスト) 3.テーブルデータ移行(Redshift → BigQuery) (テーブル設計・実装、データ移行、データ検証)
必要な条件/経験
・下記に携わった経験 -SQL,Python3, Shell に関する設計・実装経験 -Gitの使用経験 -パブリッククラウド(AWS、Google Cloud、Azure等)の開発利用経験 -Google Cloud Data Analyticsサービス (BigQuery、Composer、Data Fusion、Dataproc、Cloud Storage等) に関する知識 -プロジェクト管理ツール(JIRA、Backlog、Redmine等)の利用経験尚可スキル・下記での開発経験 -Java(Spling Boot)開発経験 -Apache Airflowの開発利用経験 -Apache Spark/Hadoopに関する知識 -YAMLの開発利用経験 -Terraformの開発利用経験 -Web APIの開発利用経験 -JP1の開発利用経験 -AWS Redshiftの開発利用経験 -Google Cloudを使用したデータ分析系基盤開発経験※上記に似た経験やスキルをお持ちであれば申し込み可能なケースもございます!まずはお気軽にご相談ください!
この案件で扱う技術
フレームワーク
データベース
インフラ
精算・お支払い
精算条件
140-180H
求人のお問い合わせ

※連絡のためメールアドレス又は電話番号どちらかを入力ください。

Sparkの案件・求人

システムエンジニアの案件・求人

案件・求人タグ検索

  • 案件評判の使い方
  • 口コミを投稿する
  • 口コミガイドライン
  • 案件評判ブログ
AD