Data Engineer / Expert Hadoop (Société Générale – GCOO)

Contexte

Société Générale recherche un Data Engineer / Expert Hadoop pour assurer l'administration, la maintenance et l'évolution de sa plateforme Big Data Cloudera CDP. La mission porte sur la fiabilité, la performance, les montées de version et l'automatisation de l'infrastructure Big Data.

Missions principales

• Administrer et maintenir les clusters Hadoop Cloudera CDP.

• Participer aux montées de version des composants Hadoop.

• Résoudre les incidents techniques complexes et intervenir en task force.

• Automatiser les déploiements, le patching et l'exploitation avec Ansible et Terraform/Terragrunt.

• Garantir la disponibilité, la performance et la sécurité de la plateforme.

• Gérer les changements (tests, rollback, mise en production).

• Collaborer avec Cloudera et les équipes internes.

• Rédiger la documentation technique.

Stack technique

• Big Data : Hadoop, Cloudera CDP 7.1.9, Spark

• Ingestion : Kafka, Apache NiFi

• Automatisation : Ansible, Terraform, Terragrunt, AWX

• Versioning / Scripting : Shell, Git, GitHub