Data Engineer GCP: Pipelines, BigQuery & Data Lakes
Posted Updated
Description
Davidson consulting recherche un Data Engineer pour concevoir et optimiser des pipelines de données sur Google Cloud Platform. Vous participerez à l’élaboration d’architectures Data Centrics et à la livraison de projets data, en étroite collaboration avec les équipes techniques et métiers.
Vous maîtrisez BigQuery, Python et Scala, avec une expérience sur Kafka et Pub/Sub. L’anglais opérationnel et l’esprit d’équipe seront des atouts majeurs pour ce poste basé à Strasbourg.
Concevoir, développer et maintenir des pipelines de données ETL/ELT sur GCP. Concevoir des data warehouses et data lakes scalables sur BigQuery. Optimiser requêtes SQL, partitionnement et coûts BigQuery/Dataflow. Versionning (Git) et déploiement via Terraform, Cloud Build, GitLab CI. Nettoyage, normalisation et tests; mise en place de monitoring des données. Travailler avec les équipes sur l’architecture data et les projets clients. Maîtrise des concepts de pipelines ETL/ELT sur GCP et data warehousing. Capacité à travailler en équipe et à communiquer en français et anglais. Goût pour les technologies et la résolution de problèmes data.Skills
Sign in to read and join the discussion.