Python、データ分析エンジニア【SQL/Python/Shell/Go言語/Java】
単価 | 600,000~700,000円/月 |
---|---|
契約形態 | 業務委託 |
エリア | 東京都/新橋 |
職種・ポジション |
職務内容
・某ゲーム企業様にて運用中のデータ分析基盤(Redshift)の、Google Cloud環境への移行に携ります。
・Google Cloud環境では、DWHとしてBigQueryを利用し、
データパイプラインにはGoogle Cloudのマネージドサービスと、データ変換ツールdbtを使用する想定です。
(上から優先度が高い順)
1.バッチ処理コード移行(Java(Spling Boot)→ Google Cloud Composer + Google Data Fusion + dbt)
(実装、単体テスト、結合テスト、システムテスト)
2.SQL構文修正(Redshift(PostgresSQL) → BigQuery)
(実装、単体テスト、結合テスト、システムテスト)
3.テーブルデータ移行(Redshift → BigQuery)
(テーブル設計・実装、データ移行、データ検証)
必要な条件/経験
・下記に携わった経験
-SQL,Python3, Shell に関する設計・実装経験
-Gitの使用経験
-パブリッククラウド(AWS、Google Cloud、Azure等)の開発利用経験
-Google Cloud Data Analyticsサービス
(BigQuery、Composer、Data Fusion、Dataproc、Cloud Storage等) に関する知識
-プロジェクト管理ツール(JIRA、Backlog、Redmine等)の利用経験尚可スキル・下記での開発経験
-Java(Spling Boot)開発経験
-Apache Airflowの開発利用経験
-Apache Spark/Hadoopに関する知識
-YAMLの開発利用経験
-Terraformの開発利用経験
-Web APIの開発利用経験
-JP1の開発利用経験
-AWS Redshiftの開発利用経験
-Google Cloudを使用したデータ分析系基盤開発経験※上記に似た経験やスキルをお持ちであれば申し込み可能なケースもございます!まずはお気軽にご相談ください!
この案件で扱う技術
言語
フレームワーク
データベース
開発環境
インフラ
精算・お支払い
精算条件
140-180H
求人のお問い合わせ
※連絡のためメールアドレス又は電話番号どちらかを入力ください。
Sparkの案件・求人
Python、データ分析エンジニア
- 〜700,000/月
- 業務委託
- SQL/Python/Shell/Go言語/Java
- 東京都/新橋
- システムエンジニア
- プログラマー
アドテク/機械学習/データマイニング
- 〜800,000/月
- 業務委託
- Python/C++/Java/C言語/Ruby/Go言語/Swift/Kotlin
- 東京都/渋谷
アドテク/機械学習/データマイニング
- 〜800,000/月
- 業務委託
- Python/C++/Java/C言語/Ruby/Go言語/Swift/Kotlin
- 東京都/渋谷
アドテク/機械学習/データマイニング
- 〜800,000/月
- 業務委託
- Python/C++/Java/C言語/Ruby/Go言語/Swift/Kotlin
- 東京都/渋谷
システムエンジニアの案件・求人
デジタル関連プロジェクト推進支援サービス
- 〜700,000/月
- 業務委託
- HTML/CSS/Java/SQL/JavaScript
- 東京都/虎ノ門
- システムエンジニア
Webプリントサービスデータ分析基盤開発
- 〜950,000/月
- 業務委託
- Python/SQL/Scala
- 東京都/西新宿
- アプリケーションエンジニア
- システムエンジニア
バーチャルカラオケ配信プラットフォーム/Unityエンジニア
- 〜750,000/月
- 業務委託
- Swift/C++/Java/Ruby/Go言語/C#/Objective-C/TypeScript/JavaScript
- 東京都
- システムエンジニア
- プログラマー
ヘルスケア関連PoC開発
- 〜1,050,000/月
- 業務委託
- TypeScript/Python/JavaScript
- 東京都
- システムエンジニア