Senior Data Engineer (H/F)
Summary
Build and maintain high-volume data pipelines on AWS/Snowflake, transforming raw ingestions into clean, modeled datasets for analytics and reporting.
Vous intégrez la Tribu Data Office de Believe et la squad Dataplateforme en tant que Data engineer. La Dataplateforme s’appuie sur une stack AWS / Snowflake avec des pratiques à l’état de l’art en data engineering et data modélisation, et des contraintes de fort volume et haute performance.
Responsabilités
Au sein de la squad organisée selon la pratique Scrum, en charge du Build et du Run de son périmètre, vous aurez pour responsabilité d’implémenter les flux de données depuis l’ingestion des nouvelles sources jusqu’à leur préparation pour exposition au travers des niveaux Bronze, Silver et Gold (warehouse).
Compétences requises
- Conception et développement d’un pipeline d’ingestion sur AWS (Step function / Python / S3)
- Transformation de données (Python, Spark Scala / Databricks, SQL)
- Pratiques de test (TU Python, TU Spark Scala)
- Modélisation Data en flocons
- Pratiques de run (surveillance, monitoring, fix)
- Rédaction de la documentation (Data galaxy / Confluence)
- Enjeux de performances, de suivi des coûts et de sécurité