Senior Data and AI Engineer
Summary
Senior Data & AI Engineer at Voxalia in Lille designing, industrializing and maintaining data/AI solutions on a Databricks Lakehouse: building ELT/ETL pipelines, governed Gold-layer datasets and Power BI reporting for real-estate business needs. Core stack: Databricks/Delta Lake, Python, SQL, Azure Data Factory, Power BI.
Mettre en oeuvre et maintenir la conception, l'industrialisation et l'évolution des solutions data et IA sur la plateforme Lakehouse. Garantir la robustesse, la performance, la sécurité et la qualité des données au service des usages métiers, analytiques et IA. La mission intègre un fort enjeu de valorisation de la donnée en couche Gold et de développement du reporting Power BI au plus près des métiers et de construire les datasets / modèles nécessaires à des restitutions Power BI fiables, performantes et gouvernées.
Expertise avancée Databricks, Lakehouse, Genie
Concevoir et optimiser des architectures data sur Databricks. Maîtriser Delta Lake, Unity Catalog, Workflows, Jobs et Notebooks. Garantir performance, scalabilité et optimisation des coûts.
Modélisation & conception de la donnée
Concevoir des modèles analytiques et décisionnels robustes. Définir faits, dimensions, granularité et historisation (SCD). Assurer cohérence, unicité et maintenabilité des modèles. Traduire les besoins métiers en structures data.
Industrialisation & Data Engineering
Développer et fiabiliser des pipelines ELT/ETL. Superviser les tests, validations et mises en production en CI/CD.
Développement augmenté par l'IA
Exploiter Databricks avec Genie et LLMs ainsi que le développement PowerBI pour accélérer la production tout en maintenant un haut niveau d'exigence (qualité, sécurité, maintenabilité).
Qualité & gouvernance des données
Implémenter et superviser les contrôles de Data Quality. Structurer la gestion des anomalies et rejets.
Leadership & contribution transverse
Diffuser les standards et collaborer étroitement avec PO, Architectes et Data Stewards.
Nous recherchons un(e) ingénieur(e) spécialisé(e) en gestion des flux de données, avec une solide expertise technique et une capacité à construire des solutions durables et performantes.
Formation
Bac+5 en informatique, Data Management, statistiques ou tout autre domaine pertinent.
Expérience
Minimum 3 à 5 ans d'expérience en gestion des données.
Compétences techniques :
- Maîtrise des langages de développement Python et SQL
- Expertise avancée Databricks / Delta Lake / Lakehouse
- Expertise PowerBI PBIT/PBIP
- Pratique d'un framework agile de type Scrum
- Maîtrise CI/CD & Git (Azure DevOps)
- APIs et intégration
- Bases de données : Maîtrise des bases relationnelles (PostgreSQL, MySQL) et non relationnelles (MongoDB, Cassandra).
- Cloud : Expérience pratique avec les services cloud (Azure Data Factory).
- Maîtrise du développement augmenté par l'IA et les agents, génération de code, refactoring, tests, documentation
- Optimisation : Capacité à concevoir des architectures de données performantes, durables et évolutives.
- Analyse des besoins : Travailler avec les parties prenantes pour comprendre les exigences métier et les transformer en solutions techniques.
- Expertise en modélisation de données du Lakehouse et connaissance des modèles métiers de l'immobilier
- Anglais niveau B2
- Connaissances ITIL
Pour réussir dans ce poste, vous devez démontrer les qualités suivantes :
- Esprit analytique : Capacité à résoudre des problématiques techniques complexes et à anticiper les besoins futurs.
- Rigueur : Vous garantissez des pipelines fiables, des données de qualité et une documentation exhaustive.
- Curiosité technique : Passion pour l'exploration de nouvelles technologies et méthodes d'ingénierie des données.
- Communication claire : Capacité à expliquer vos choix techniques à des équipes non techniques.
- Proactivité : Être force de proposition pour améliorer les architectures et les flux de données.
- Esprit collaboratif : Travailler efficacement avec des équipes pluridisciplinaires dans un environnement agile.