Senior Data Engineer

Be in IT to firma rekrutacyjna, wyspecjalizowana w poszukiwaniu Specjalistów z branży technologii informatycznych. Obecnie, dla naszego klienta, poszukujemy osoby na stanowisko Senior Data Engineer.

Zakres obowiązków:

• Długofalowa współpraca z międzynarodową, topową firmą consultingową, świadczącą usługi IT dla dużych i średnich firm z różnorodnych sektorów.

• Przyjęcie odpowiedzialności Forward Deployed Data Engineer w strukturach klienta przekształcając rozproszone i niespójne dane źródłowe w zweryfikowane i zaufane zasoby.

• Praca z danymi w miejscach ich występowania, w systemach ERP, u administratorów danych, na SharePoint oraz w plikach arkuszy kalkulacyjnych.

• Budowanie integracji, pipeline'ów, modeli danych oraz dashboardów umożliwiających wykorzystanie danych w ramach jednego zaangażowania.

• Zapewnienie zgodności liczb aby każda wartość miała możliwość odtworzenia ścieżki do swojego źródła.

• Bycie głównym wykonawcą w dwuosobowym zespole zapewniając samodzielną realizację większości pracy Zespołu przy jednoczesnym coachingu i wsparciu drugiego inżyniera w zespole.

• Odpowiedzialność za cały workstream danych tj. od rozpoznania źródeł danych, poprzez ich walidację, po uzgodniony wynik końcowy.

• Bezpośrednia współpraca z właścicielami danych u klienta w celu zrozumienia poszczególnych systemów oraz wyjaśniania znaczenia danych osobom nietechnicznym.

• Rozpoznawanie, profilowanie i rozumienie systemów źródłowych, w tym ERP, właścicieli danych, SharePoint oraz plików.

• Samodzielne wykonywanie większości prac: pobieraniem, integracja oraz pipeline'y transformacyjne, które są wdrażane szybko i odświeżane w miarę walidacji danych.

• Modelowanie danych do analizy oraz budowanie mechanizmów uzgodnieniowych i walidacji, tak aby wyniki były zgodne i posiadały możliwość odtworzenia ścieżki do źródła.

• Dostarczanie dashboardów oraz widoków self-serve, dających zespołowi wiarygodny obraz danych.

• Bezpośrednia współpraca z interesariuszami u klienta w celu wyjaśnienia pochodzenia danych, rozwiązywania niezgodności oraz budowania zaufania do liczb.

• Ustalanie architektury danych oraz podejmowanie praktycznych decyzji dotyczących narzędzi oraz wyboru build-vs-buy dla danego zaangażowania.

• Promowanie reużywalnych wzorców integracji, mapowania oraz walidacji w ramach głównej platformy.

• Zapewnienie jakości danych, bezpieczeństwa oraz zgodności (compliance) na każdym etapie zaangażowania.

Oczekujemy:

• Minimum 4 lat doświadczenia zawodowego.

• Wykształcenia wyższego (tytuł licencjata/inżyniera lub wyższy). Preferowane kierunki studiów: Management Information Systems, Computer and Information Science, Systems Engineering, Matematyka lub Statystyka.

• Doświadczenia w budowaniu pipeline'ów oraz modeli danych na Snowflake i Databricks (SQL, Python, PySpark), z wykorzystaniem Sigma lub porównywalnego narzędzia BI do dostarczania wyników.

• Doświadczenia w integracji danych z systemów ERP, fund administration, SharePoint, API oraz plików typu flat files w zwalidowany, gotowy do analizy model danych.

• Umiejętności projektowania mechanizmów reconciliation, walidacji oraz kontroli jakości danych, a także dbałości o to, aby dane faktycznie się zgadzały (tie out).

• Umiejętności stosowania modelowania dimensional oraz performance tuning w celu szybkiego wdrażania wiarygodnych danych.

• Zdolności do pozostania hands-on jako senior engineer przy jednoczesnym coachingu mniej doświadczonego członka zespołu.

• Umiejętności bezpośredniej komunikacji z właścicielami danych u klienta, zadawania właściwych pytań oraz wyjaśniania pochodzenia danych osobom nietechnicznym.

• Umiejętności aktywnego słuchania oraz szybkiego uczenia się nieznanych systemów źródłowych i nowej domeny biznesowej.

• Doświadczenia we wdrażaniu anonimizacji danych oraz najlepszych praktyk w zakresie bezpieczeństwa i zgodności (compliance) w środowiskach klienckich.

• Zrozumienia zasad responsible AI w kontekście wykorzystania danych w przepływach AI.

• Znajomości języka angielskiego na poziomie B2 lub C1 umożliwiająca swobodną komunikację w międzynarodowym środowisku.

• Mile widziana dostępność ASAP; akceptowalny jest maksymalnie miesięczny okres wypowiedzenia ze skutkiem na koniec miesiąca.

Oferujemy:

• Długofalowa współpraca z wynagrodzeniem w przedziale 140-170 PLN netto/godz. + VAT.

• Wsparcie przy zakładaniu i prowadzeniu działalności gospodarczej, dla osób bez takiego doświadczenia.

• Sprawny proces rekrutacyjny - dwie rozmowy techniczne z managerami, online (każda maksymalnie po godzinie).

• Współpraca w pełni zdalna.

• Benefity - prywatna opieka medyczna, karta Multisport.

• Nowoczesny sprzęt zapewniany przez firmę, wraz z softem i konfiguracją.