Freelance Data Engineer – Microsoft Fabric & PySpark

Hier werk je mee aan de verdere uitbouw van het dataplatform in Microsoft Fabric. De nadruk ligt duidelijk op data engineering, aangevuld met een stukje data-analyse en validatie.
Je ontsluit verschillende databronnen richting de Bronze-laag en bouwt robuuste pipelines om data verder te verwerken en verrijken richting Silver. Daarbij bewaak je datakwaliteit, performantie en schaalbaarheid en zorg je ervoor dat pipelines betrouwbaar en onderhoudbaar opgebouwd worden.
Daarnaast denk je kritisch mee over mappings, businessregels en datastructuren. Wanneer requirements of brondata niet volledig duidelijk zijn, stem je actief af met de business en andere stakeholders in plaats van zelf assumpties te maken.
Binnenkort start het team ook met de verdere uitbouw van een eerste Gold-laag / data product. Bij verlenging van de opdracht bestaat de mogelijkheid om ook hier verder aan mee te werken.
Power BI kan occasioneel gebruikt worden om analyses uit te voeren en data te valideren, maar vormt niet de kern van de opdracht.

• Sterke ervaring als Data Engineer
• Sterke kennis PySpark, inclusief performanceoptimalisatie
• Ervaring met lakehouse- en medallionarchitecturen
• Ervaring met Microsoft Fabric is een sterke plus
• Sterke ervaring met Databricks, Spark of gelijkaardige moderne dataplatformen is ook een plus
• Je werkt in het Nederlands