Data Engineer Senior (F/M)

O projekcie
Zespół buduje rozwiązania Data Lake/DWH dla dużego środowiska bankowego, obejmujące zasilanie danych online i offline w środowisku on-prem oraz GCP. Rola łączy modelowanie danych, budowę pipeline'ów ETL/ELT i tuning SQL, zgodnie z modelem DevSecOps.

Twój zakres obowiązków
Projektowanie i realizacja rozwiązań zasilania danych
Budowa pipeline'ów ETL/ELT
Praca z Oracle, PostgreSQL, BigQuery i Informatica PowerCenter
Praca z Kafka/Pub/Sub
Tuning zapytań SQL on-prem i w GCP
Tworzenie rozwiązań ładowania danych w Pythonie i Rust
Modelowanie danych i przygotowywanie datamartów
Wsparcie testów, wdrożeń i rozwiązywania incydentów

Nasze wymagania
Doświadczenie w budowie rozwiązań Data Lake/DWH i datamartów
Doświadczenie w projektowaniu i utrzymaniu pipeline'ów ETL/ELT
Ekspercka znajomość Oracle i PostgreSQL (projektowanie, tuning SQL)
Znajomość Google BigQuery
Praktyczna znajomość Informatica PowerCenter
Znajomość Kafka/Pub/Sub
Znajomość Linuxa na poziomie zaawansowanym
Doświadczenie w testach, wdrożeniach i rozwiązywaniu incydentów
Gotowość do pracy w modelu DevSecOps

Mile widziane
Python
Airflow
Rust
Apache Spark