GCP Data Engineer
Posted Updated
Summary
Senior Data Engineer builds and optimizes Google Cloud data pipelines, focusing on BigQuery, SQL, and Python to support financial-sector data transformation.
OGÓLNE INFORMACJE:
- Branża: finansowa
- Lokalizacja: praca hybrydowa (1x w miesiącu z biura w Warszawie)
- Stawka: do 150 PLN/h netto+VAT
- Forma współpracy: B2B - długofalowa współpraca
Podsumowanie: Rola Senior Data Engineer / BigQuery Developer koncentruje się na udział w strategii transformacji danych, skupiając się na projektowaniu i wdrażaniu rozwiązań przetwarzania danych w Google Cloud Platform.
Obowiązki:
- Tworzenie i rozwój rozwiązań opartych o Google Cloud Platform.
- Projektowanie oraz implementacja procesów przetwarzania danych.
- Budowa i rozwój hurtowni danych oraz datamartów.
- Tworzenie rozwiązań wykorzystujących BigQuery.
- Pisanie i optymalizacja skryptów SQL.
- Tworzenie rozwiązań w Pythonie wspierających przetwarzanie danych.
- Współpraca z architektami, analitykami danych oraz biznesem.
- Udział w migracji i transformacji danych do nowego środowiska danych.
Wymagania:
- Minimum 4-5 lat doświadczenia w obszarze Data Engineering.
- Bardzo dobra znajomość SQL.
- Doświadczenie w pracy z Google Cloud Platform.
- Praktyczna znajomość BigQuery.
- Dobra znajomość Python.
- Doświadczenie w projektach związanych z przetwarzaniem dużych wolumenów danych.
- Znajomość zagadnień związanych z hurtowniami danych.
- Umiejętność pracy w środowisku Agile.
Mile widziane:
- Doświadczenie w sektorze bankowym lub finansowym.
- Znajomość Data Lake / Data Warehouse.
- Znajomość Data Governance.
- Doświadczenie w migracjach danych.
- Znajomość CI/CD dla rozwiązań danych.
- Doświadczenie z innymi usługami GCP (Cloud Storage, Dataflow, Composer, Dataproc itp.).