Data Engineer / Expert Hadoop (Société Générale – GCOO)
Summary
Maintain and evolve Société Générale’s Cloudera CDP Hadoop clusters, automate deployments with Ansible/Terraform, and ensure platform reliability and security.
Contexte
Société Générale recherche un Data Engineer / Expert Hadoop pour assurer l'administration, la maintenance et l'évolution de sa plateforme Big Data Cloudera CDP. La mission porte sur la fiabilité, la performance, les montées de version et l'automatisation de l'infrastructure Big Data.
Missions principales
Administrer et maintenir les clusters Hadoop Cloudera CDP.
Participer aux montées de version des composants Hadoop.
Résoudre les incidents techniques complexes et intervenir en task force.
Automatiser les déploiements, le patching et l'exploitation avec Ansible et Terraform/Terragrunt.
Garantir la disponibilité, la performance et la sécurité de la plateforme.
Gérer les changements (tests, rollback, mise en production).
Collaborer avec Cloudera et les équipes internes.
Rédiger la documentation technique.
Stack technique
Big Data : Hadoop, Cloudera CDP 7.1.9, Spark
Ingestion : Kafka, Apache NiFi
Automatisation : Ansible, Terraform, Terragrunt, AWX
Versioning / Scripting : Shell, Git, GitHub