Data Engineer / Développeur Big Data Senior (H/F) -Nantes
Summary
Senior Data Engineer / Big Data developer joining an agile data team to design, build and continuously improve a high-volume data platform handling real-time streaming and batch processing, plus API development and test automation. Core stack: Spark, Kafka, Scala/Java, Hadoop ecosystem (HDFS, Hive, HBase), GitLab CI/CD, Jenkins, SonarQube, ELK, Grafana.
Contexte
Dans le cadre du renforcement d'une équipe Data agile, nous recherchons un Data Engineer / Développeur Big Data Senior pour intervenir sur une plateforme de données à fort volume. Vous participerez à la conception, au développement et à l'amélioration continue de solutions permettant de valoriser et exploiter des données en temps réel et en batch.
Vos missions
- Développer et maintenir de nouvelles fonctionnalités au sein d'une équipe agile.
- Concevoir et faire évoluer les architectures de traitement de données.
- Participer aux choix techniques et accompagner les autres membres de l'équipe.
- Garantir la qualité, la performance et la maintenabilité du code.
- Mettre en place et améliorer les processus d'automatisation des tests.
Contribuer à l'amélioration continue des pratiques de développement et d'exploitation
Environnement technique
Big Data : Spark (batch & streaming), Kafka
Langages : Scala, Java
API : Conception et développement d'API
Data Platform : Hadoop, HDFS, Hive, HBase, Phoenix
DevOps & CI/CD : GitLab CI/CD, Jenkins, Artifactory
Qualité & Monitoring : SonarQube, ELK, Grafana
Tests : JUnit, Xray, automatisation des tests
Profil recherché
Expérience solide en développement Big Data et architectures distribuées.
Maîtrise de Spark, Kafka et de l'écosystème Hadoop.
Bonne culture DevOps et intégration continue.
Expérience des environnements Agile/Scrum.
Esprit d'équipe, capacité à challenger les besoins et à être force de proposition.
Sens de la qualité, de l'automatisation et de l'amélioration continue.
Sensibilité aux problématiques de performance, scalabilité et fiabilité des plateformes Data.
Mission idéale pour un profil souhaitant intervenir sur un environnement Big Data moderne, au sein d'une équipe agile mature et orientée qualité.