Azure Data Engineer Senior

Après la migration des données non-SAP vers Azure,nous souhaitons renforcer son architecture Data, développer de nouveaux cas d'usage métiers et améliorer la gouvernance, la sécurité et la performance de notre plateforme

Pour accompagner ces évolutions, elle recherche un Azure Data Engineer Senior, disposant d'une expertise approfondie en Azure Databricks, Databricks Unity Catalog et Azure Data Architecture

• Concevoir, développer et maintenir des pipelines de données avec Azure Data Factory, Databricks et les services Azure.

• Mettre en place des architectures modernes de données : Data Lake, Delta Lake et Lakehouse.

• Développer et industrialiser des solutions Data répondant aux besoins métiers, analytiques et Data Science.

• Participer à l'implémentation et à l'administration de Databricks Unity Catalog : catalogues, schémas, permissions, partage et gouvernance des données.

• Contribuer au développement d'une stratégie de Data en libre-service (Self-Service Analytics).

• Garantir la sécurité, la fiabilité, la scalabilité et la performance de la plateforme Data.

• Surveiller et optimiser la consommation des ressources ainsi que les coûts Azure et Databricks.

• Automatiser les processus d'ingestion, de transformation et de déploiement des données.

• Collaborer avec les Data Analysts, Data Scientists et les équipes métiers.

• Documenter les architectures, les flux de données et les bonnes pratiques.

• Assurer la maintenance et l'amélioration continue de la plateforme Azure Data

Profil recherché

• Diplôme en informatique, ingénierie des données ou domaine équivalent.

• Minimum 5 ans d'expérience dans un poste similaire en Data Engineering.

• Expérience significative dans la conception d'architectures Data sur Microsoft Azure.

• Expertise pratique en Azure Databricks et Databricks Unity Catalog.

• Maîtrise des environnements Spark, PySpark, Delta Lake, Python et SQL.

• Niveau avancé en Power BI, ainsi qu’une solide expérience dans l’utilisation de Delta Lake/Lakehouse, Azure Storage, Azure SQL et Azure Key Vault.

• Bonne maîtrise d’Azure DevOps et des pratiques de CI/CD appliquées au Data Engineering

• Expérience en gouvernance, sécurité et gestion des accès aux données.

• Capacité à optimiser les performances et les coûts des plateformes Cloud.

• Autonomie, esprit analytique et capacité à résoudre des problématiques techniques complexes.

• Bonnes capacités de communication et aptitude à collaborer avec des interlocuteurs techniques et métiers.

• Certifications Microsoft Azure ou Databricks.