【基本リモート/AWS】データインフラエンジニア/データ基盤設計構築

こちらの案件は終了しました

都道府県

東京都

最寄駅

確認中

契約形態

業務委託

必須スキル

・データパイプラインの設計・構築経験(Dagster / Airflow / dbt 等いずれか) ・データリネージやデータカタログの設計経験、またはアーキテクチャレベルでの知見 ・AWSでのインフラ構築・運用経験(ECS / RDS / ALB / S3等) ・TerraformによるIaCの経験 ・Docker / Docker Composeを用いた環境構築経験 ・GitHubを用いた開発経験 ・技術選定・設計から実装・運用まで自走できること
自分のスキルで応募できるか相談する

歓迎スキル

・データカタログの導入・運用経験(OpenMetadata / Apache Atlas / DataHub等) ・データメッシュやメダリオンアーキテクチャ等のデータ基盤設計パターンへの理解 ・Apache Iceberg / Nessie / Trino等のデータレイク技術の経験 ・認証基盤の構築経験(Keycloak / OAuth2 / OIDC) ・Pythonでのツール・スクリプト開発経験 ・データ品質管理・データガバナンスの設計経験 ・コスト最適化・モニタリング設計の経験

業務内容

ロボットデータを扱うデータ基盤のインフラ設計・構築を担当いただきます。AWSを活用したデータ基盤上で、データリネージ機能の設計・構築、データカタログ基盤の構築、認証基盤の移行、データパイプラインのマルチテナント対応、インフラ最適化などを推進します。技術選定から設計、実装、運用まで一貫して携わり、アーキテクチャレベルでの設計をリードしていただきます。 【技術スタック】 ・クラウド:AWS ・コンテナ:Docker ・IaC:Terraform ・データ基盤:Dagster ・データレイク:Apache Iceberg ・データ管理:OpenMetadata ・認証基盤:Keycloak ・データベース:PostgreSQL ・クエリエンジン:Trino ・Webサーバー:Nginx

案件No

134257

担当者

おすすめポイント

AWSを活用したロボットデータ基盤のアーキテクチャ設計から構築・運用まで一貫して携われる上流工程中心の案件です。データリネージ、データカタログ、認証基盤、マルチテナント対応などデータ基盤全体に関わるため、高度な技術力と設計力を発揮できます。技術選定から参画できるため裁量が大きく、自走できるエンジニアにとって非常にやりがいのある環境です。基本リモートで働きやすく、高単価も魅力です。

Python × SQL × PostgreSQL × AWS × Git × Terraform × Apache × nginx × Dockerのおすすめ案件

東京都のおすすめ案件

データベースエンジニア × クラウドエンジニアのおすすめ案件

ソフトウェア・情報処理のおすすめ案件

フリーランスエンジニアインタビュー

【基本リモート/AWS】データインフラエンジニア/データ基盤設計構築

案件によっては早期に募集停止となる可能性があり、応募ができない場合もあります。