Data Engineer GCP
Posted Updated
Description
Opis projektu
Projekt realizowany dla operatora telekomunikacyjnego, którego celem jest migracja Hurtowni Danych opartej na technologii Oracle do środowiska Google Cloud Platform (GCP).
- Lokalizacja: hybrydowo – 3 dni pracy z biura w Warszawie lub w pełni zdalnie w przypadku kandydatów spoza Warszawy.
- Stawka: 120-130 zł/h B2B
- Proces rekrutacyjny: screeening, rozmowa rekrutacyjna, rozmowa z klientem.
Must-have:
- Bardzo dobra znajomość platformy Google Cloud Platform (GCP) oraz usług chmurowych.
- Znajomość narzędzia dbt (Data Build Tool).
- Doświadczenie na stanowisku Data Analyst lub Data Quality Analyst w organizacji opartej na danych.
- Bardzo dobra znajomość SQL i PL/SQL, w tym zaawansowanych zapytań bazodanowych.
- Praktyczna znajomość języka Python.
- Doświadczenie w zarządzaniu jakością danych (Data Quality Management) oraz stosowaniu zasad Data Governance.
- Znajomość środowiska Linux oraz skryptowania w Bash.
- Dobra znajomość ekosystemu Cloudera Hadoop, w tym Apache Spark i Apache Kafka.
- Znajomość procesów przetwarzania danych, w szczególności ETL oraz przetwarzania danych w czasie rzeczywistym (Real-Time Data Processing).
- Wykształcenie wyższe (licencjackie lub magisterskie) na kierunku informatyka, analiza danych, statystyka, ekonomia lub pokrewnym.
- Znajomość języka angielskiego na poziomie minimum B2.
Nice-to-have:
- Doświadczenie w pracy z procesami CI/CD oraz narzędziami automatyzującymi.
- Dobra znajomość zagadnień związanych z Data Governance, w tym zarządzania metadanymi (Metadata Management) oraz frameworkami zapewniania jakości danych.
- Doświadczenie w pracy z różnymi typami systemów źródłowych, takimi jak Kafka, MQ, SFTP, bazy danych, API oraz współdzielone zasoby plikowe.
- Doświadczenie w projektach międzynarodowych lub realizowanych na wielu rynkach.
Skills
Sign in to read and join the discussion.