Data Engineer: Azure Fabric Pipelines & Delta Lake
Posted 1
view
Summary
Data Engineer building and developing the data layer in Microsoft Fabric for an insurance-sector risk modeling project: integrating data sources, creating Data Factory pipelines with PySpark, versioning datasets, and ensuring data security, with weekly coordination meetings in Warsaw.
Connectis_ poszukuje doświadczonej osoby na stanowisko Data Engineer. Główny zakres obejmuje tworzenie i rozwijanie warstwy danych w Microsoft Fabric, integrację źródeł i przygotowanie danych dla modeli ryzyka w sektorze ubezpieczeniowym.
Zakres prac to pipeline'y danych w Data Factory, PySpark, wersjonowanie zestawów danych, meetingi koordynacyjne w Warszawie (ok. 1x w tygodniu) i dbałość o bezpieczeństwo danych.