Senior Data Quality Engineer

W ITLT pomagamy naszym zaprzyjaźnionym firmom przekształcać ambitne pomysły w cyfrową rzeczywistość. Z nastawieniem na wyzwania, ciekawość technologii i zwinność współtworzymy wyjątkowe rozwiązania IT i zapewniamy doświadczone osoby eksperckie, które pomagają przyspieszać cyfrową transformację.

Aktualnie poszukujemy profilu na stanowisko: Senior Data Quality Engineer

Informacje organizacyjne:

• Tryb pracy: zdalny

• Projekt: Dołącz do nowo powstającego zespołu odpowiedzialnego za budowę i rozwój centralnej platformy Monitoring & Observability (M&O) oraz Data Quality dla globalnej organizacji. Projekt koncentruje się na zapewnieniu wysokiej jakości danych, niezawodności procesów danych oraz monitoringu platform i aplikacji działających w środowisku enterprise.

• Technologie na projekcie: SQL, Python, Databricks, Fivetran, SAP, Power BI, Grafana, Azure, Azure SQL, Kafka, Apache Flink, GitHub, GitHub Actions, CI/CD, Cloud Technologies.
  

• Zakres prac:

  • Projektowanie, implementacja i rozwój reguł kontroli jakości danych (Data Quality Rules).

  • Budowa i rozwój Data Quality Engine wspierającego walidację danych w procesach ETL/ELT.

  • Monitorowanie jakości danych w pipeline'ach oraz identyfikacja anomalii i problemów jakościowych.

  • Definiowanie oraz mierzenie kluczowych wymiarów jakości danych:

    • Accuracy,

    • Completeness,

    • Consistency,

    • Timeliness,

    • Validity,

    • Uniqueness.

  • Analiza przyczyn źródłowych problemów związanych z jakością danych (Root Cause Analysis).

  • Tworzenie rozwiązań automatyzujących procesy kontroli jakości danych.

  • Raportowanie, wizualizacja oraz prezentacja wyników monitoringu Data Quality.

  • Współpraca z zespołami Data Engineering, Business oraz właścicielami źródeł danych.

  • Wdrażanie najlepszych praktyk związanych z jakością danych oraz ciągłe doskonalenie istniejących mechanizmów monitoringu.

Oczekiwania:

• Minimum kilkuletnie doświadczenie w obszarze Data Quality, Data Validation lub Data Profiling.

• Praktyczna znajomość metodologii oraz wymiarów jakości danych.

• Doświadczenie w projektowaniu i wdrażaniu reguł walidacyjnych oraz kontroli jakości danych.

• Bardzo dobra znajomość SQL wykorzystywanego do analizy i walidacji danych.

• Doświadczenie w tworzeniu rozwiązań automatyzujących procesy Data Quality z wykorzystaniem Python.Dobra znajomość procesów ETL/ELT oraz architektury data pipeline’ów.

• Doświadczenie w pracy z platformą Databricks.

• Umiejętność identyfikowania i analizowania przyczyn źródłowych problemów jakości danych.

• Doświadczenie w pracy z dużymi wolumenami danych oraz wieloma źródłami danych.

Mile widziane:

• Doświadczenie z Fivetran.Znajomość danych i integracji z systemami SAP.

• Doświadczenie w budowie dashboardów i raportów w Power BI lub Grafanie.

• Znajomość Azure oraz Azure SQL.

• Doświadczenie z Kafka lub Apache Flink.

• Znajomość procesów CI/CD.

• Doświadczenie pracy z dużymi platformami danych w środowiskach enterprise

Oferujemy:

• Długofalowe stabilne zatrudnienie w oparciu o kontrakt B2B.

• Szansa na rozwój w dużej strukturze, bezpośredni kontakt z Managerem zespołu.

• Praca w firmie, w której IT jest dojrzałe i globalne, a metodyki zwinne są respektowane.

• Dopłata do karty MultiSport oraz ubezpieczenia.

• Godziny startu pracy 7:30 - 9:30.

• Sprawny proces rekrutacyjny (wideokonferencja), maksymalnie 2 spotkania online (pierwsze z kimś z zespołu, drugie z Managerem).