Senior Data Engineer - Spark ETL & Real-Time Data Pipelines
Summary
The Senior Data Engineer will design and develop batch and streaming data pipelines using Spark, while managing data collection, storage, and system monitoring within an agile team.
CATS recherche un Data Engineer expérimenté à Vannes pour renforcer la squad Data, dans un cadre agile et en lien avec PO/BA et l'équipe Dev. Vous concevrez et développerez des pipelines de collecte et stockage des données depuis diverses sources, en utilisant Spark en batch et streaming, et participerez à la migration et à la supervision des traitements.
Vous assurerez les tests, le déploiement et le monitoring, et veillerez à la qualité du code et à l'alignement avec les exigences