Data Engineer
Posted 21
views
Summary
On-site Data Engineer in Gdynia, Poland designing, building, and maintaining Python-based data processing pipelines for large data volumes (especially text files), working with databases/knowledge bases and Microsoft Azure data engineering services, with a focus on performance optimization.
- Projektowanie, rozwój i utrzymanie procesów przetwarzania danych w języku Python,
- Przetwarzanie dużych wolumenów danych, ze szczególnym uwzględnieniem plików tekstowych,
- Implementacja i optymalizacja rozwiązań do transformacji oraz przetwarzania danych,
- Praca z bazami danych i bazami wiedzy w celu gromadzenia i organizowania danych,
- Wykorzystywanie usług i narzędzi chmurowych Microsoft Azure w obszarze Data Engineering,
- Zapewnianie jakości, spójności i wydajności procesów przetwarzania danych,
- Analiza oraz rozwiązywanie problemów wydajnościowych przy dużych zbiorach danych,
- Współpraca z zespołem technicznym i bieżące komunikowanie postępów prac.
Kogo poszukujemy?
- Min. 4 lata doświadczenia w pracy na stanowisku Data Engineer (konkretnie w inżynierii danych, a nie wyłącznie w tworzeniu aplikacji),
- Bardzo dobra znajomość języka Python w kontekście analizy i przetwarzania danych,
- Doświadczenie w pracy z chmurą Microsoft Azure,
- Doświadczenie w przetwarzaniu dużych wolumenów danych oraz dużych plików tekstowych,
- Doświadczenie w pracy z bazami danych oraz bazami wiedzy (Knowledge Bases),
- Umiejętność optymalizacji i zapewniania wydajności procesów Data Engineering,
- Wysokie umiejętności komunikacyjne i sprawna praca w zespole,
- Język angielski na poziomie zaawansowanym.