Senior Data Engineer Kafka / Spark (k/m), branża bankowa
Description
Wynagrodzenie
B2B: 140 – 190 PLN / godz. netto
O projekcie
W Ideamotive szukamy doświadczonej osoby na stanowisko Senior Data Engineer. Dołączysz do nas, aby realizować projekty dla klientów z sektora bankowego. Skupiamy się na budowie i rozwoju platform danych opartych o Kafkę, Sparka oraz architekturę lakehouse. Oferujemy długoterminową współpracę, w której pojedynczy projekt trwa zazwyczaj około roku.
Twój zakres obowiązków
Projektowanie i rozwój przepływów danych oraz integracji.
Budowanie i utrzymywanie rozwiązań opartych na Kafce (Streams, Connect, ksqlDB) lub Sparku.
Definiowanie schematów danych oraz ich transformacji.
Monitorowanie i optymalizacja wydajności systemów.
Diagnozowanie i rozwiązywanie problemów technicznych.
Dbanie o bezpieczeństwo przetwarzanych danych.
Tworzenie dokumentacji technicznej.
Przeprowadzanie code review.
Czego oczekujemy
Minimum 3 lata doświadczenia na stanowisku Data Engineer lub Backend Developer w obszarze przetwarzania danych.
Praktyczna znajomość Apache Kafka lub Apache Spark.
Umiejętność programowania w języku Java (Spring Boot) lub Python.
Doświadczenie w pracy z MongoDB lub inną bazą danych NoSQL.
Znajomość procesów CI/CD oraz praktyk DevOps.
Doświadczenie z narzędziami do monitoringu (Prometheus, Grafana, OpenTelemetry).
Mile widziane
Znajomość Apache Iceberg lub Delta Lake.
Doświadczenie z mechanizmami bezpieczeństwa Kafki (TLS, SASL, ACL).
Praktyczna znajomość chmury AWS.
Doświadczenie z Kubernetes i Terraform.
Wcześniejsza praca przy hurtowniach danych w branży finansowej.
Proces rekrutacyjny
Nasz proces jest krótki i konkretny. Składa się z rozmowy wstępnej, technicznej rozmowy merytorycznej oraz ostatecznej decyzji.