Data Engineer Senior Big Data & Cloud (IT) / Freelance
Summary
Build and scale high-volume data pipelines and cloud-native data platforms using Java/Spring, Spark, Hadoop, and AWS/Azure for a consulting client.
Au sein d'une équipe Data & Digital, vous intervenez sur le développement et l'industrialisation de solutions Big Data à forte volumétrie dans un environnement exigeant et innovant. Vous contribuerez à la conception, au développement et à l'exploitation de plateformes Data reposant sur des technologies Cloud et Big Data.
Vos missions
Développer des applications Data et des API REST en Java/Spring.
Participer aux études de faisabilité et aux choix techniques.
Concevoir et implémenter des traitements Big Data.
Mettre en œuvre les bonnes pratiques de qualité logicielle (TDD/BDD).
Automatiser les déploiements et contribuer à l'industrialisation des environnements.
Optimiser les performances applicatives et la stabilité des plateformes.
Accompagner les équipes métiers et participer au support des phases de tests.
Assurer le maintien en conditions opérationnelles des solutions.
Profil recherché
Bac+5 École d'Ingénieur ou équivalent.
Expérience significative en Data Engineering et environnements Big Data.
Excellente maîtrise de Java.
Solides compétences sur Spark et Hadoop.
Expérience des environnements Cloud AWS et/ou Azure.
Bonne maîtrise de Python et/ou Scala.
Expérience des API REST et du framework Spring.
Environnement technique
Java
Spring Boot
Spark
Hadoop
HDFS
Oozie
Scala
Python
AWS
Azure
Shell Unix
Git / GitHub
Containers
TDD / BDD