Azure Data Engineer Senior – Bruxelles (Belgique)
Description
Dans le cadre du renforcement de ses équipes Data, nous recherchons un Azure Data Engineer Senior pour intervenir sur la conception, le développement et l'industrialisation de pipelines de données au sein de l'environnement Microsoft Azure.
Le consultant participera à la mise en place d'architectures Data modernes, notamment Data Lake, Delta Lake et Lakehouse, tout en collaborant avec les Data Analysts, Data Scientists et les équipes métier.
Missions principales :
- Concevoir et développer des pipelines de données avec Azure Data Factory, Azure Databricks et les services Azure.
- Mettre en œuvre des architectures Data modernes : Data Lake, Delta Lake et Lakehouse.
- Développer et industrialiser de nouveaux cas d'usage métier.
- Participer à la mise en place de stratégies Data en libre-service (Self-Service Data).
- Contribuer à l'implémentation et à l'administration de Databricks Unity Catalog.
- Gérer la gouvernance des données, les permissions et les accès.
- Superviser, optimiser et maîtriser les performances ainsi que les coûts des environnements Azure et Databricks.
- Automatiser les processus d'ingestion, de transformation et de déploiement des données.
- Collaborer avec les Data Analysts, Data Scientists et les parties prenantes métier.
- Documenter les flux de données, les architectures et les bonnes pratiques techniques.
Profil recherché
Compétences techniques requises :
- Expertise des services Microsoft Azure : Azure Data Factory, Azure Databricks, Azure Storage, Azure SQL, Azure Key Vault, Azure DevOps.
- Maîtrise de Databricks Unity Catalog.
- Très bonne maîtrise de SQL et Python.
- Expertise de Spark / PySpark.
- Bonne maîtrise de Delta Lake.
- Expérience dans la conception et l'industrialisation de pipelines Data.
- Connaissance des architectures Data Lake et Lakehouse.
- Maîtrise des principes CI/CD.
- Expérience en monitoring, optimisation des performances et gestion des coûts Azure.
Profil recherché :
- Minimum 5 ans d'expérience dans un poste similaire en Data Engineering.
- Solide expérience sur les environnements Microsoft Azure.
- Capacité à concevoir et industrialiser des solutions Data évolutives.
- Bonne compréhension des enjeux de gouvernance et de qualité des données.
- Autonomie, rigueur et capacité à collaborer avec des équipes pluridisciplinaires.
- Formation supérieure en informatique, Data Engineering ou domaine équivalent.
Compétences appréciées :
- Certifications Microsoft Azure ou Databricks.
- Expérience en administration et gouvernance Power BI.
- Connaissance des architectures de streaming de données en temps réel.
- Expérience avec Terraform et les pratiques Infrastructure as Code (IaC).
- Connaissance d'Azure Monitor et Log Analytics.
- Familiarité avec les sources de données SAP.
Méthodologie :
- Environnement Agile / Scrum.
- Pratiques DevOps et CI/CD.
Langues :
- Français ou néerlandais courant obligatoire.