Data Engineer
Summary
Build and maintain data pipelines, warehouses, and lakes using SQL, Python, Spark, and cloud platforms to power analytics and AI products.
Szukamy pasjonata danych, który chce tworzyć przyszłość w prężnie rozwijającej się firmie technologicznej z siedzibą w Warszawie. Dołącz do zespołu, który projektuje i rozwija innowacyjne rozwiązania danych, które są fundamentem produktów.
Wynagrodzenie:
14 000 - 17 000 złotych brutto
Wymagania:
- Minimum 3 lata doświadczenia na stanowisku Data Engineer lub podobnym.
- Bardzo dobra znajomość SQL oraz Pythona.
- Doświadczenie w pracy z dużymi zbiorami danych oraz narzędziami Big Data (np. Apache Spark, Hive).
- Znajomość narzędzi automatyzacji przepływów danych (np. Airflow, dbt).
- Praktyczna wiedza z zakresu hurtowni danych, jezior danych oraz platform chmurowych (AWS, Azure, GCP).
- Umiejętność pracy w metodologii Agile/Scrum.
- Dobra znajomość języka angielskiego umożliwiająca swobodną komunikację, mile widziana znajomość języka niemieckiego.
- Doświadczenie z narzędziami takimi jak Docker, Kubernetes – mile widziane.
Do Twoich zadań będzie należało:
- Projektowanie, rozwój i utrzymanie wydajnych pipeline’ów danych z wykorzystaniem SQL i Pythona.
- Integracja danych z różnych źródeł (bazy danych, pliki, strumienie danych).
- Współtworzenie oraz rozwój platformy danych (Data Lakehouse, hurtownie danych) z naciskiem na przetwarzanie i analizę danych.
- Optymalizacja i monitorowanie procesów ETL/ELT, dbanie o jakość i bezpieczeństwo danych.
- Współpraca z zespołem data science oraz interesariuszami biznesowymi przy definiowaniu wymagań i projektowaniu schematów danych.
- Wsparcie zespołów analitycznych w zakresie integracji danych i przygotowywania danych do analiz.