Data Engineer – Azure & DatabricksData Engineer – Azure & Databricks
Summary
Data Engineer in Paris building the data foundations for analytics, machine learning and AI projects: designing robust pipelines and Lakehouse architectures on Azure Databricks with Python, SQL and PySpark, preparing data for RAG/agent applications, industrializing deployments with CI/CD, and contributing to governance, security and cost optimization.
LTR Consulting recherche un(e) Data Engineer Azure / Databricks pour construire les fondations Data nécessaires aux projets Analytics, Machine Learning et Intelligence Artificielle.
Les informations suivantes visent à fournir aux candidats potentiels une meilleure compréhension des exigences de ce poste.
Vos missions
· Concevoir et développer des pipelines de données robustes.
· Assurer ingestion, transformation, qualité et exposition des données.
· Construire des architectures Lakehouse / Data Platform.
· Développer sur Azure Databricks avec Python, SQL et PySpark.
· Préparer les données pour les applications IA, RAG et Agents.
· Industrialiser traitements et déploiements Data.
· Contribuer à la gouvernance, sécurité, performance et optimisation des coûts.
Compétences recherchées
Python / SQL / PySpark
Azure Databricks
Delta Lake / Lakehouse
Azure Data Factory
Microsoft Fabric apprécié
Spark
CI/CD / Git
Terraform apprécié
MLflow apprécié
GenAI / RAG apprécié
Profil recherché
3 à 7+ ans en Data Engineering. xuezdbg Expérience Azure / Databricks fortement souhaitée. Capacité à intervenir sur des projets Data classiques comme sur les fondations Data des projets IA.