責任:

• Azure Data Factory（ADF）、Azure Databricks、およびAzure Synapse Analyticsを使用してデータパイプラインを設計および実装します。
• 構造化および非構造化データソース用のETL/ELTプロセスを開発および最適化します。
• Azure環境内で効率的なデータの取り込み、変換、およびストレージを確保します。
• データレイク、データウェアハウス、およびリレーショナルデータベース（Azure SQL、Azure Synapse、Azure Cosmos DB）を設計および管理します。
• データベースのパフォーマンス、インデックス、およびパーティショニング戦略を最適化します。
• データセキュリティ、アクセス制御、および暗号化のベストプラクティスを実装します。
• Azure Blob Storage、Azure Data Lake、およびAzure FunctionsなどのAzureデータサービスを展開および管理します。
• データパイプラインのパフォーマンス問題を監視し、トラブルシューティングします。
• Azure Purviewとデータカタログツールを使用してデータの品質、整合性、およびガバナンスを確保します。
• コンプライアンス要件に従い、データプライバシーのベストプラクティスを施行します。
• データワークフローのロギング、モニタリング、およびアラートソリューションを実装します。
• データサイエンティスト、アナリスト、ビジネスチームと密接に連携してデータ要件を理解します。
• 今後の参考のためにデータソリューション、アーキテクチャ、およびベストプラクティスを文書化します。
• ジュニアエンジニアにメンターシップと技術的指導を提供します。

資格:

必要:

• Azure Data Engineer AssociateまたはAWS/Googleの同等の認定
• インフラストラクチャおよびDevOpsまたはデータパイプラインの経験

あると良い:

• Snowflakeアーキテクチャの認定または実務経験
• Databricksの認定または実務経験

ジョブの説明を参照してください。