Senior Data Engineer with Databricks
Posted
Summary
Senior Data Engineer at Xebia Group in Wrocław who designs and implements scalable data pipelines on Databricks, standardizes and migrates legacy pipelines, and builds transformations with dbt and Python, including onboarding new financial datasets for US/APAC regions in collaboration with data architects.
Projektowanie i implementacja skalowalnych pipeline'ów danych na Databricks, standaryzacja istniejących pipeline'ów, migracja i refaktoryzacja starych rozwiązań oraz transformacje z użyciem dbt i Python. Będziesz też wspierać onboarding nowych zbiorów danych (regiony US, APAC) i współpracować z architektami danych. To oferta dla doświadczonego Data Engineera z produkcyjnym Databricks i pracą z danymi finansowymi.
- min. 5 lat doświadczenia jako Data Engineer;
- praktyczne doświadczenie z Databricks przy pipeline'ach produkcyjnych;
- bardzo dobra znajomość Python do przetwarzania danych;
- doświadczenie z dbt i warstwami transformacji danych;
- doświadczenie z systemami legacy i migracją pipeline'ów;
- doświadczenie z danymi finansowymi lub rynkowymi;
- praca z regionu Unii Europejskiej i pozwolenie na pracę