DATA ENGINEER GCP
Summary
A confirmed GCP Data Engineer designs and builds batch and real-time data pipelines while helping migrate an on-premise data ecosystem to Google Cloud Platform. The core stack includes BigQuery, Dataform, Dataflow, Cloud Composer, Cloud Run, and Cloud Functions, with a focus on data quality, freshness, and observability.
Dans le cadre d’un programme de transformation Data , nous recherchons un Data Engineers GCP confirmé pour participer à la migration complète d’un écosystème Data On-Premise vers Google Cloud Platform.
L’objectif est de construire une architecture moderne et cloud-native, capable de traiter d’importants volumes de données tout en répondant à des enjeux de temps réel, de fraîcheur et de qualité des données.
Missions
- Concevoir et développer des pipelines de données batch et temps réel ;
- Migrer les traitements On-Premise vers les services managés de GCP ;
- Développer et optimiser les transformations ELT avec BigQuery et Dataform ;
- Orchestrer les flux et traitements avec Cloud Composer ;
- Déployer des composants serverless avec Cloud Run et Cloud Functions ;
- Garantir la qualité, la disponibilité et la fraîcheur des données ;
- Participer à l’industrialisation et à l’optimisation de la plateforme Data.
Compétences recherchées
- Expertise confirmée de Google Cloud Platform ;
- Très bonne maîtrise de BigQuery, SQL et Dataform ;
- Expérience significative sur Dataflow et Cloud Composer ;
- Maîtrise de Cloud Run et Cloud Functions ;
- Expérience des architectures Data temps réel ;
- Bonne connaissance des problématiques de migration On-Premise vers le Cloud ;
- Maîtrise des enjeux de qualité, d’observabilité et de performance des données.
Profil attendu
Data Engineer confirmé disposant d’une expérience solide sur des projets GCP en production, capable d’intervenir de manière autonome sur la conception, le développement et l’industrialisation de pipelines Data.