Senior Data Engineer (Spark / Scala)
Posted Updated
Description
Senior Data Engineer (Spark / Scala)
Jesteśmy agencją rekrutacyjną specjalizującą się w direct search. Dla naszego klienta, rozwijającej się firmy technologicznej - poszukujemy osoby na stanowisko Senior Data Engineer.
Wynagrodzenie: do 25 000 PLN netto + VAT (B2B) + płatne dni wolne do 26 dni.
Tryb pracy:1100% zdalnie
Proces: maksymalnie 2 rozmowy
Zakres roli:
- Budowa i optymalizacja pipeline’ów w Spark (Scala)
- Poprawa wydajności, stabilności i jakości przetwarzania danych
- Troubleshooting pipeline’ów oraz wsparcie platformy
- Rozwój monitoringu, housekeeping oraz obszaru data governance (w tym GDPR)
- Współpraca przy tworzeniu standardów, frameworków i best practices
Wymagania:
- Bardzo dobra znajomość Spark + Scala (production experience)
- Doświadczenie w performance tuning i optymalizacji
- Zaawansowany SQL
- Doświadczenie w środowisku Cloudera (uruchamianie i debugowanie jobów)
- Znajomość Python, Bash, Linux
Dodatkowo:
- Doświadczenie w pracy z platformami dataowymi / big data
- Podejście do stabilności systemów i jakości danych
Po przesłaniu aplikacji koordynator rekrutacji skontaktuje się telefonicznie, aby:
– sprawdzić dopasowanie do roli,
– przedstawić szczegóły dotyczące klienta,
– omówić dalszy przebieg procesu rekrutacyjnego.