Data Engineer
Posted 112
views
Summary
Remote-from-Poland Data Engineer on a 6-month project (extendable, starting ASAP), working 100% remotely. Day to day: designing, automating, and optimizing data pipelines and ETL processes using SQL, SSIS, and Python (NumPy, Pandas, FastAPI), plus building data monitoring/validation systems and collaborating with data scientists and business teams.
O projekcie:
Start: ASAP
Czas trwania współpracy: 6 miesięcy z mozliwością przedłużenia
Tryb pracy: 100% zdalnie
Wymagania:
- Bardzo dobra znajomość SQL
- Bardzo dobra znajomość SQL Server Integration Services (SSIS)
- Korzystanie z Pythona (bibliotek: NumPy, Pandas oraz FastAPI) oraz znajomość koncepcji procesów CI/CD
- Doświadczenie w pracy z bazami danych i/lub hurtowniami danych
- Zdolność do rozwiązywania złożonych problemów i analizowania danych, aby podejmować trafne decyzje.
- Efektywna współpraca z różnorodnymi zespołami — zarówno biznesowymi, jak i technicznymi, zapewniając płynny przepływ informacji.
- Zależy Ci na zapewnieniu wysokiej jakości i spójności danych, dbając o każdy szczegół w realizowanych zadaniach.
- Jesteś skrupulatny/a w swojej pracy i zawsze dbasz o najwyższe standardy, biorąc pełną odpowiedzialność za wyniki swoich działań.
- Mile widziana znajomość technologii chmurowych: Azure, GCP
Codzienne zadania:
- Projektowanie i implementacja procesów przetwarzania danych z zapewnianiem wydajności i skalowalności
- Automatyzacja przepływów danych
- Analiza i optymalizacja procesów ETL na poziomie kodu SQL oraz struktur baz danych
- Tworzenie systemów monitorowania, walidacji i czyszczenia danych
- Współpraca z data scientistami, analitykami i zespołami biznesowymi w celu zrozumienia potrzeb dotyczących danych.
