Cloud Data Engineer (f/m/x)
Summary
Designs and maintains large-scale data platforms on Microsoft Azure for Sii's client projects — building Data Lake / Data Warehouse solutions, ETL/ELT pipelines, and Spark/PySpark processing. Needs 4+ years of data engineering experience, fluent Polish and English, and residence in Poland.
Wymagania:
- - Minimum 4 lata doświadczenia w projektach związanych z przetwarzaniem i integracją dużych wolumenów danych
- - Bardzo dobra znajomość SQL oraz Python
- - Doświadczenie w pracy z frameworkami do przetwarzania danych takimi jak Apache Spark / PySpark
- - Praktyczne doświadczenie w projektowaniu i budowie rozwiązań Data Lake oraz Data Warehouse
- - Umiejętność budowania i utrzymywania pipeline'ów ETL/ELT oraz pracy z narzędziami do orkiestracji i integracji danych
- - Komercyjne doświadczenie w projektach opartych o rozwiązania chmurowe Microsoft Azure w obszarze przetwarzania danych (np. Databricks, Azure Data Factory, Synapse, Fabric)
- - Znajomość koncepcji przetwarzania danych w środowisku rozproszonym oraz optymalizacji pipeline'ów danych
- - Umiejętność swobodnej komunikacji w języku angielskim
- - Wymagana płynna znajomość języka polskiego
- - Wymagane przebywanie na terenie Polski
Nice-to-have requirements
- - Doświadczenie w projektach związanych z migracją danych z on-premise do chmury (bazy danych: Oracle, PostgreSQL, MS SQL)