Senior Databricks Data Engineer: PySpark Pipelines
Posted 8
views
Summary
Designs and builds robust data pipelines on Databricks using PySpark and Spark SQL, optimizing data flows, code quality, and DevOps practices in Agile teams. Works in a cloud environment (AWS/Azure/GCP) alongside operations and business teams in Lyon.
Devoteam Data Driven Lyon recherche un Data Engineer pour concevoir et construire des pipelines de données robustes sur Databricks, en utilisant PySpark et Spark SQL. Vous contribuerez à l’optimisation des flux, à la qualité du code et aux pratiques DevOps dans un cadre Agile.
Vous travaillerez avec les équipes exploitation et métiers, dans un environnement Cloud (AWS/Azure/GCP) et une culture learning. Anglais B2 exigé, esprit d’équipe et rigueur indispensables.