Data Engineer (Google Cloud)

Jako firma rekrutacyjna jesteśmy świadomi, że każdy solidny biznes napędzają ludzie z odpowiednio dopasowanymi kompetencjami. Nasz styl zarządzania i partnerskie podejście pozwalają nam na elastyczne dostosowanie się do Twoich potrzeb i zapewniają pełne wsparcie podczas współpracy. W związku z ciągłym rozwojem i dużą liczbą projektów rekrutacyjnych, jakie prowadzimy dla naszych Partnerów, szukamy osoby na stanowisko:

Data Engineer (Google Cloud)

Zakres obowiązków:

• Budowanie rozwiązań klasy Data Lake i DWH oraz procesów zasilania danych zarówno on-line, jak i off-line

• Projektowanie i realizacja rozwiązań informatycznych w obszarze zasilania danych

• Analizowanie danych oraz przygotowywanie modeli logicznych i fizycznych

• Strojenie zapytań SQL na bazach relacyjnych i hurtownianych w środowiskach on-prem oraz GCP

• Tworzenie przepływów off-line i on-line w narzędziach on-prem oraz GCP

• Tworzenie rozwiązań do ładowania danych w językach Python i Rust dla danych strukturalnych i niestrukturalnych

• Przygotowywanie datamartów tematycznych na bazach relacyjnych i kolumnowych

• Opracowywanie koncepcji oraz implementowanie rozwiązań w oparciu o wymagania i potrzeby biznesowe

• Usuwanie incydentów oraz udział w rozwiązywaniu problemów

• Wspieranie testów i wdrożeń zmian w zakresie procesów zasilania danych

• Wspieranie serwisowania wdrożonego oprogramowania

• Praca zgodnie z modelem DevSecOps

Wymagania:

• Znajomość aspektów związanych z budową pipeline-ów zasilających ETL/ELT

• Doświadczenie w budowaniu i projektowaniu rozwiązań Data Lake i DWH

• Znajomość technologii wykorzystywanych w ramach architektury sterowanej zdarzeniami takich jak np. Kafka, Pub/Sub

• Znajomość aspektów związanych z budową rozwiązań BigData wykorzystujących możliwości GenAI

• Znajomość Google BigQuery

• Znajomość Kubernetes (najlepiej Google Kubernetes Engine i OpenShift)

• Znajomość relacyjnych baz danych Oracle i PostgreSQL (projektowanie, budowa i tuning baz danych)

• Biegła znajomość Python i/lub Rust

• Dobrze znasz Apache AirFlow

Mile widziane:

• Wiedza z zakresu: koncepcji data mesh, baz wektorowych i grafowych

• Znajomosć Apache Spark - najlepiej GCP Data Proc; Apache Beam – najlepiej GCP DataFlow; AutomateNow; Informatica Power Center

Oferujemy:

• Prywatną opiekę medyczną

• Dofinansowanie karty sportowej

• Szkolenia

• Stałe wsparcie konsultanta

• Program rekomendacji pracowników