Architekt Systemowy Senior – Data Lake / DWH (F/M)

Open 39d posting dated 3 weeks ago

Branża bankowa

Czym będziesz się zajmować?

  • Projektowaniem i budową pipeline'ów zasilających ETL/ELT (on-line i off-line)

  • Rozwijaniem rozwiązań Data Lake i DWH w środowisku on-prem i GCP

  • Tworzeniem przepływów danych w Pythonie i/lub Ruscie dla danych strukturalnych i niestrukturalnych

  • Budowaniem rozwiązań BigData z wykorzystaniem możliwości GenAI

  • Strojeniem zapytań SQL na bazach relacyjnych i hurtownianych

  • Przygotowywaniem datamart'ów tematycznych

  • Tworzeniem koncepcji rozwiązań na podstawie wymagań biznesowych

  • Pracą zgodnie z modelem DevSecOps

Wymagane:

  • Doświadczenie w budowie pipeline'ów ETL/ELT

  • Praktyczna znajomość projektowania Data Lake i DWH

  • Znajomość architektury sterowanej zdarzeniami – Kafka, Pub/Sub

  • Google BigQuery

  • Kubernetes (GKE lub OpenShift)

  • Bazy danych Oracle i PostgreSQL – projektowanie, budowa i tuning

  • Biegła znajomość Pythona i/lub Rusta

  • Apache Airflow

Mile widziane:

  • Data mesh

  • Bazy wektorowe i grafowe

  • Apache Spark (GCP Dataproc) / Apache Beam (GCP Dataflow)

  • AutomateNow, Informatica Power Center