Data Engineer confirmé - Spark / SQL / Databricks (H/F)
Summary
This Data Engineer role involves designing data pipelines, modeling data warehouses, and migrating decision-making platforms to the cloud using Spark, SQL, and Databricks. The position requires strong technical expertise in data transformation and quality, alongside the ability to collaborate directly with business stakeholders.
Data Engineer confirmé - Spark / SQL / Databricks (H/F)
Data Engineer confirmé - Spark / SQL / Databricks (H/F) 69 - Lyon 5e Arrondissement
Dans le cadre de l'évolution d'une plateforme décisionnelle et de sa migration progressive vers le cloud, nous recherchons un Data Engineer confirmé capable d'intervenir aussi bien sur la conception des traitements que sur la modélisation et la qualité des données. Mission de 12 mois.
Vos missions
- Recueillir et analyser les besoins fonctionnels et techniques des métiers
- Identifier, qualifier et fiabiliser les données nécessaires
- Concevoir et faire évoluer des datawarehouses et datamarts
- Développer des flux d'intégration et pipelines de données
- Réaliser les traitements de nettoyage, transformation et contrôle qualité
- Développer et optimiser des traitements Spark
- Contribuer à la migration de la plateforme data vers Databricks
- Produire des restitutions et tableaux de bord à destination des métiers
- Tester, documenter, déployer et maintenir les solutions en production
- Participer aux revues de code et à l'amélioration continue de l'architecture
- Accompagner les utilisateurs : ateliers, recueil des besoins, support et formation
Profil recherché
Vous justifiez d'au moins 5 ans d'expérience en Data Engineering, BI ou ingénierie décisionnelle, avec une pratique réellement opérationnelle de Spark et SQL. Une expérience solide en conception d'entrepôts de données et en développement de traitements data est indispensable. La connaissance de Databricks et des problématiques de migration vers une plateforme cloud constituera un réel avantage. Au-delà de la technique, nous recherchons une personne autonome, rigoureuse, capable d'échanger directement avec les métiers, de comprendre leurs usages et de proposer des solutions adaptées.
Environnement technique
Indispensable :- Spark- SQL- Modélisation décisionnelle : DWH / datamarts- Traitement et qualité de données
Environnement complémentaire :- Databricks- Python- Hive, Indexima- Oracle, stockage objet S3 / Parquet- Informatica- Tableau Server- Git, Jenkins, Ansible, Terraform- Control-M- PL/SQL, Shell- Java apprécié- Méthodes Agile
Type de contrat CDI
CDI de chantier ou d'opération Durée du travail 38H30/semaine Travail en journée
Salaire
- Salaire brut : Annuel de 45000.0 Euros à 50000.0 Euros sur 12 mois
- Primes
- Complémentaire santé
Déplacements Déplacements: Jamais Zone départementale
Expérience
- 5 An(s) Cette expérience est indispensable
Compétences
- Analyser, exploiter, structurer des données
- Mastère spécialisé expert big data engineer
Savoir-être professionnels
- Faire preuve d'autonomie
- Faire preuve de rigueur et de précision
- Organiser son travail selon les priorités et les objectifs
Informations complémentaires
- Secteur d'activité : Ingénierie,études techniques
Employeur
0 salarié (n'ayant pas d'effectif au 31/12 mais ayant employé des salariés au cours de l'année de référence)