【GCP/Python/データエンジニア】リモート可 データパイプライン構築
データエンジニア
-
900,000 円/月
-
東京都
-
業務委託 / 契約社員
-
業務内容
以下、概要になります
・リモート可能です
・統合データ基盤におけるデータパイプライン設計および構築業務
・役割:データ基盤開発担当
・主な業務:データパイプラインの設計・実装・運用、データマート/データモデルの設計・構築、既存パイプラインのリファクタリング、障害対応・データ品質モニタリングの仕組みづくりなど -
開発環境
-
言語
- Python, SQL
-
フレームワーク
-
DB
-
OS/クラウド
- Google Cloud Platform
-
言語
-
求めるスキル
<必須要件>
・仕様提案から影響範囲の洗い出し、リリース計画・調整、リリースまで一気通貫で遂行した経験
・Pythonを用いた開発経験(3年以上)
・BigQueryやRDBに対してSQLを用いる開発経験
・以下いずれかの経験
・ ※データ基盤・データパイプラインの開発
・ ※バックエンドサービスの開発(データ処理を含むもの)
・dbt等のデータ変換ツールの利用経験
・データモデリング(スタースキーマ、Data Vault等)の知識
・CI/CDパイプラインの構築経験
・チーム開発の経験(GitHub/Git Flow等)
<歓迎要件>
・Airflow/Cloud Composerを用いたワークフロー構築経験
・Apache Beam/Dataflowを用いたデータ処理経験
・BigQuery/Redshift等DWHの設計・運用経験 -
期間
未定
-
想定稼働日数
週5日
-
面談回数
2回
-
リモート
一部リモート
15日前