Senior Data Engineer - K/M
Summary
Senior Data Engineer (7+ yrs) who independently designs and implements scalable data-engineering solutions and supports data-platform modernization for a BFSI-sector project, working hybrid (3 days/week) from the Kraków office on a B2B contract. Core stack: Databricks (Unity Catalog, Structured Streaming), PySpark, SQL, Delta Lake, FastAPI, Oracle/SQL Server, Informatica.
- Posiadasz minimum 7 lat doświadczenia w obszarze Data Engineering oraz programowaniu w Pythonie.
- Masz praktyczne doświadczenie w tworzeniu i rozwijaniu API z wykorzystaniem FastAPI.
- Bardzo dobrze znasz Databricks, PySpark, SQL oraz Delta Lake.
- Posiadasz doświadczenie w migracjach do Unity Catalog.
- Pracowałeś/-aś z Databricks Structured Streaming oraz rozwiązaniami do przetwarzania danych w czasie rzeczywistym.
- Masz doświadczenie w pracy z bazami Oracle i SQL Server oraz narzędziem Informatica.
- Potrafisz samodzielnie projektować i wdrażać skalowalne rozwiązania data engineeringowe.
- Znasz specyfikę sektora Banking, Financial Services & Insurance (BFSI).Mile widziane:
- Doświadczenie w pracy z chmurą Azure oraz administracją Databricks.
- Znajomość narzędzi i procesów CI/CD.
- Doświadczenie z Git, Azure DevOps lub GitLab.
- Umiejętność tuningu wydajności i optymalizacji rozwiązań Spark.
- Doświadczenie w prowadzeniu działań technicznych oraz współpracy z interesariuszami.
- Certyfikaty Databricks.