Data Engineer confirmé - Spark / SQL / Databricks F/H
Summary
Data Engineer on a 12-month contract migrating a decisional platform to the cloud, designing data warehouses, building Spark pipelines, and ensuring data quality using Spark, SQL, and Databricks.
Data Engineer confirmé - Spark / SQL / Databricks F/H
Data Engineer confirmé - Spark / SQL / Databricks F/H 69 - Lyon 6e Arrondissement
Descriptif du poste:
Dans le cadre de l'évolution d'une plateforme décisionnelle et de sa migration progressive vers le cloud, nous recherchons un Data Engineer confirmé capable d'intervenir aussi bien sur la conception des traitements que sur la modélisation et la qualité des données. Mission de 12 mois.
Vos missions
- Recueillir et analyser les besoins fonctionnels et techniques des métiers
- Identifier, qualifier et fiabiliser les données nécessaires
- Concevoir et faire évoluer des datawarehouses et datamarts
- Développer des flux d'intégration et pipelines de données
- Réaliser les traitements de nettoyage, transformation et contrôle qualité
- Développer et optimiser des traitements Spark
- Contribuer à la migration de la plateforme data vers Databricks
- Produire des restitutions et tableaux de bord à destination des métiers
- Tester, documenter, déployer et maintenir les solutions en production
- Participer aux revues de code et à l'amélioration continue de l'architecture
- Accompagner les utilisateurs : ateliers, recueil des besoins, support et formation
Profil recherché:
Vous justifiez d'au moins 5 ans d'expérience en Data Engineering, BI ou ingénierie décisionnelle, avec une pratique réellement opérationnelle de Spark et SQL. Une expérience solide en conception d'entrepôts de données et en développement de traitements data est indispensable. La connaissance de Databricks et des problématiques de migration vers une plateforme cloud constituera un réel avantage. Au-delà de la technique, nous recherchons une personne autonome, rigoureuse, capable d'échanger directement avec les métiers, de comprendre leurs usages et de proposer des solutions adaptées.
Environnement technique
Indispensable :
- Spark
- SQL
- Modélisation décisionnelle : DWH / datamarts
- Traitement et qualité de données
Environnement complémentaire :
- Databricks
- Python
- Hive, Indexima
- Oracle, stockage objet S3 / Parquet
- Informatica
- Tableau Server
- Git, Jenkins, Ansible, Terraform
- Control-M
- PL/SQL, Shell
- Java apprécié
- Méthodes Agile
Type de contrat CDD - 12 Mois
Contrat travail Salaire
- 45 - 50 k€ brut annuel
Expérience
- 5 An(s) Cette expérience est indispensable
Informations complémentaires
- Secteur d'activité : Ingénierie,études techniques
Employeur
Que vous soyez salarié chez PRESTANOVA ou intervenant externe, vous n'êtes pas une « ressource ». Vous êtes une personne, avec une manière de travailler, une façon de penser, un potentiel. Nous prenons le temps d'écouter et de comprendre pour créer un cadre où chacun peut s'exprimer pleinement.
Notre façon de travailler :
- Un cadre clair dès le départ
- Un vrai suivi
- Une confiance avant tout
- Des projets qui ont du sens
- Des projets qui peuvent évoluer vers une embauche chez le