NEW
【AWS/インフラエンジニア】フルリモート可 ロボットデータ基盤構築支援
インフラエンジニア
-
900,000 円/月
-
東京都
-
業務委託 / 契約社員
-
業務内容
以下、概要になります
・フルリモート可能です
・ロボットから収集したデータの追跡・管理を可能にするデータ基盤の整備を目的とした、AWSインフラの構築支援
・役割:設計リード
・主な業務:データリネージ機能の設計、データカタログ基盤の構築、認証基盤の移行、データパイプラインのマルチテナント対応、AWSインフラの改善・最適化、技術選定、関連ドキュメント整備など -
開発環境
-
言語
- Python
-
フレームワーク
-
DB
-
OS/クラウド
- Amazon Web Services
-
言語
-
求めるスキル
<必須要件>
・データパイプラインの設計・構築経験(Dagster/Airflow/dbt等いずれか)
・データリネージやデータカタログの設計経験、またはアーキテクチャレベルでの知見(技術選定・設計から主導できる)
・AWSでのインフラ構築・運用経験(ECS/RDS/ALB/S3等)
・TerraformによるIaCの経験
・Docker/Docker Composeを用いた環境構築経験
・GitHubを用いた開発経験
・技術選定・設計から実装・運用まで自走できること
<歓迎要件>
・データカタログの導入・運用経験(OpenMetadata/Apache Atlas/DataHub等)
・データメッシュやメダリオンアーキテクチャ等のデータ基盤設計パターンへの理解
・Apache Iceberg/Nessie/Trino等のデータレイク技術の経験
・認証基盤の構築経験(Keycloak/OAuth2/OIDC)
・Pythonでのツール・スクリプト開発経験
・データ品質管理・データガバナンスの設計経験
・コスト最適化・モニタリング設計の経験 -
期間
未定
-
想定稼働日数
週5日
-
面談回数
3回
-
リモート
フルリモート
4日前