Data Engineer
Vous rejoindrez Pôle Sud, cabinet de conseil en transformation digitale, pour intervenir sur des projets data à fort enjeu technique et métier. En tant que Data Engineer, vous serez au cœur de la conception, de l’industrialisation et de la fiabilisation des flux de données, avec un rôle de référent technique sur les sujets de traitement et d’intégration.
Vous travaillerez dans un environnement où la maîtrise de l’écosystème cloud, des pipelines de données et des traitements distribués est essentielle. Votre expérience sur GCP, notamment BigQuery et Dataflow, vous permettra de concevoir des solutions robustes, performantes et adaptées à des usages analytiques comme temps réel.
Le poste demande une forte capacité à structurer des traitements de bout en bout, à collaborer avec les équipes techniques et métier, et à faire évoluer les dispositifs existants avec pragmatisme. Une attention particulière sera portée à votre expérience concrète sur Kafka et sur la mise en œuvre de traitements de données en temps réel, au-delà d’une simple utilisation de l’outil.
Basé à Valbonne, ce rôle s’adresse à une personne autonome, rigoureuse et force de proposition, souhaitant apporter son expertise sur des sujets data exigeants tout en contribuant à la qualité, à la performance et à la pérennité des solutions mises en place.
- Concevoir et industrialiser des pipelines de données sur GCP, notamment avec BigQuery et Dataflow.
- Mettre en place et maintenir des traitements batch et temps réel dans un environnement distribué.
- Développer des flux de données robustes autour de Kafka et des mécanismes de streaming.
- Assurer le rôle de référent technique sur les sujets data engineering et accompagner les choix d’architecture.
- Optimiser les performances, la fiabilité et la maintenabilité des traitements existants.
- Collaborer avec les équipes produit, data et techniques pour traduire les besoins en solutions concrètes.
- Participer aux revues techniques, à la documentation des traitements et à la capitalisation des bonnes pratiques.
- Veiller à la qualité, à la traçabilité et à la cohérence des données tout au long de la chaîne de traitement.
- Poste basé à Valbonne, au sein d’un cabinet à taille humaine.
- Projets data variés avec un impact concret sur les traitements et la qualité des données.
- Environnement collaboratif favorisant l’autonomie et le partage d’expertise.
- Rôle technique reconnu, avec une vraie place dans les choix de conception et d’industrialisation.
- Exposition à des problématiques cloud, streaming et temps réel sur des contextes exigeants.
- Cadre propice à la montée en compétence et à la valorisation de votre expertise data.
Expérience confirmée en Data Engineering avec prise en charge de sujets techniques de bout en bout.Maîtrise de GCP, avec une expérience pratique de BigQuery et Dataflow.Très bonne expérience sur Kafka et sur la conception de traitements de données en temps réel.Capacité démontrée à développer de vrais flux de streaming, et non à utiliser Kafka de manière superficielle.Bonne maîtrise de Python ou de Java pour le développement de traitements data.Expérience sur Hadoop et Spark.Rigueur, autonomie, sens de l’analyse et capacité à agir comme référent technique.