ITエンジニアフリーランス支援サイト

六本木

業務委託

・Data関連の案件で10年以上経験 ・Azure環境で Databricksにデータの分析、変換、モデリング、移行の経験 ・Azure Data lake storage, Databricks clusters ・Databricks のアーキテクチャやコンポーネント (ノートブック、ジョブ) に関する深い理解 ・データ基盤（Databricks） ・ジョブ、データブリックスノートブックのパフォーマンス最適化 ・Spark、SQL、データフレームに関する深い知識 ・Python, Pysparkのプログラミング経験

・コミュニケーション（日本語 - ネイティブ、英語：書く、会話）

■概要 Azure Databricks 開発案件（CXプロジェクトの一環としてデータマネージメントシステム）。 顧客の作成中のソースのレビュー、データ変換・移行に関する分析。　 １つLayerにあるデータを変換して次のLayerに持っていく。 （Layer 1⇒Layer 2⇒Layer 3） Layer 3でMLなどに活用、BIで分析（別チームが動いている）