Remote Data Engineer – PySpark, GCP, BigQuery
Summary
Data engineer building scalable cloud ETL pipelines and advanced data test/validation frameworks for an international banking-sector client. Works with Spark/PySpark on GCP Dataproc clusters, loads data into BigQuery, and automates tests and processes in CI/CD. Hybrid work model based in Warsaw.
Nexio Management Ltd. poszukuje inżyniera danych do międzynarodowego projektu dla klienta z sektora bankowego. Do zadań należy budowa skalowalnych procesów ETL w chmurze, tworzenie zaawansowanych frameworków testowych i walidacyjnych dla danych biznesowych.
Rola obejmuje prace nad Spark/PySpark na klastrach GCP Dataproc, zasilanie danych do BigQuery oraz automatyzację testów i procesów w środowisku CI/CD. Praca w modelu hybrydowym, z elastycznymi formami współpracy.