Data Engineer – H/F CDI - Paris
Summary
Build and maintain data pipelines, clean and model customer data, and deploy BigData solutions on AWS/Azure for a product-focused team.
Dans le cadre de notre croissance, nous sommes à la recherche d’un(e) Data Engineer. Vous participez à la mise en place de solutions Data pour centraliser les données des clients et garantir leur qualité et leur exploitation.
Détail des missions
- Implémenter et mettre en place des traitements de données dans leur intégralité (data pipeline):
- Collecte et ingestion de flux de données
- Modélisation et nettoyage
- Traitement et transformation de la donnée collectée
- Contrôle de qualité / pertinence et détection des anomalies
- Restitution des données sous divers formats
- Industrialiser et déployer des pipelines de traitement On Premise et dans le Cloud (AWS, Azure)
- Veiller à la gouvernance des données et mise en place de process MDM:
- Rapprochement de données de différentes sources non homogènes
- Dédoublonnage
- Normalisation
- Historisation
- Calcul d’indicateurs et d’agrégats
- Ordonnancer et planifier des traitements dans les environnements de production
- Participer à l’évolution de la stack technique et au choix des outils (Framework interne, technologies BigData, Cloud…)
- Participer à la veille technologique et s’informer en permanence des nouveautés dans le domaine
- Collaborer avec une équipe de DevOps pour la mise en place des outils BigData et assurer la sécurité des données
- Optimiser les traitements, revues de code
Environnement technique
- Technologies et langages :
- Hadoop, Spark (streaming), Kafka, Scala, Python (PySpark), Hue, Zeppelin, SQL/T-SQL, Suite MS BI (SQL Server, SSIS, SSRS), PowerShell, Shell Unix, AWS (S3, Glue), Docker/Kubernetes, Frameworks maison, Power BI, tableau software, Synapse.
- Organisation et agilité :
- Gitlab, Scrum/Jira
Profil recherché
- Vous justifiez d’une expérience professionnelle de 2 ans minimum (alternance comprise) dans la data et avez déjà travaillé sur un environnement Bigdata avec Spark et Hadoop
- Vous êtes à l’aise dans des environnements algorithmiques complexes
- Vous êtes autonome, rigoureux(se), force de proposition et avez un bon relationnel
- Vous êtes passionné(e) par la data
- Vous êtes diplômé(e) d’une école d’informatique
- Vous avez développé une appétence à la compréhension fonctionnelle
- Des connaissances Cloud (AWS, Azure) seraient un plus
Lieu de travail : 82bis/84 rue de la Procession – 75015 Paris
Rémunération : entre 45 K€ et 50 K€ selon profil (39h/semaine + 12 RTT/an) + télétravail (hybride) + carte restaurant (10 €/jour pris en charge à 50%) + Mutuelle prise en charge à 60% pour le collaborateur et ses enfants + Prévoyance prise en charge à 100% + Transports en commun pris en charge à 50%.
Vous êtes intéressé(e) ? Envoyez votre candidature.