Expert Databricks / Lead Data Engineer

LE CONTEXTE

Nous recherchons un Lead Data Engineer / Expert Databricks pour rejoindre une équipe chez un acteur majeur du secteur de l'énergie. Vous interviendrez sur un projet de migration et d'industrialisation d'une nouvelle plateforme data, dans un environnement technique exigeant alliant enjeux de performance, de qualité et d'amélioration continue.

VOS MISSIONS

• Concevoir, développer et maintenir des pipelines data sous Databricks / Spark
• Développer les traitements en Python, PySpark et SQL
• Contribuer à la définition et à la mise en oeuvre du modèle de données cible
• Industrialiser les pipelines : standards de développement, tests, CI/CD, déploiement
• Orchestrer les traitements via Databricks Workflows / Lakeflow Jobs
• Contribuer à la qualité, à l'observabilité et à la fiabilité des traitements
• Assurer le run : suivi de production, analyse d'incidents, amélioration continue
• Prendre en compte les enjeux de performance et de maîtrise des coûts
• Participer au cadrage des besoins avec le Product Owner et les équipes utilisatrices
• Contribuer aux choix techniques liés à la nouvelle plateforme data
• Participer à la mise en place des pratiques de développement Databricks
• Contribuer à la documentation technique et aux standards d'équipe
• Participer aux rituels agiles et à l'amélioration continue de la feature team

ENVIRONNEMENT TECHNIQUE

• Traitement et pipelines data : Databricks, Spark, PySpark
• Langages : Python, SQL
• Modélisation : Delta Lake, Unity Catalog
• Industrialisation : CI/CD, tests, Databricks Workflows
• Cloud public (sans contrainte de provider), Terraform
• Apprécié : Kafka, Lakeflow / DLT, Power BI

PROFIL RECHERCHÉ

• Minimum 5 ans d'expérience sur Databricks, avec certification Databricks (impératif)
• Très bonne maîtrise de Spark / PySpark et de Python / SQL (impératif)
• Solide expérience en modélisation de données
• Participation à un projet de migration ou de transformation data
• Expérience en industrialisation de pipelines (CI/CD, tests, déploiement)Autonomie, leadership technique, force de proposition
• Capacité à travailler avec des profils variés : Data, BI, PO, métier
• Niveau de séniorité visé : confirmé / senior (niveau 3)

INFORMATIONS COMPLÉMENTAIRES

• Fourchette de rémunération selon profil entre 60 k et 70 k€ brut annuel
• Localisation : Lyon
• Démarrage souhaité : 15 octobre 2026
• Télétravail : 50 %
• Participation et intéressement
• PEE et PERECOL
• CSE avec cagnotte individuelle 200 €/an
• Téléphone + abonnement pro
• Tickets restaurant 8,50 €
• Mutuelle Malakoff Médéric Eco Activ 9
• Forfait mobilité durable jusqu'à 600 €/an