Senior Azure Data Engineer
Summary
Senior Azure Data Engineer on an aviation-industry project building a scalable data platform for predictive maintenance of aircraft engines. Day to day: Spark/Databricks pipelines in Python and SQL, ETL/ELT design, and CI/CD with Terraform and Databricks Asset Bundles, on-site in Warsaw.
Rola senior Azure Data Engineer w projekcie z branży lotniczej
rozwijasz skalowalną platformę danych wspierającą predykcyjne utrzymanie silników lotniczych, budujesz pipeline'y w Azure Databricks, Apache Spark, Python i SQL oraz wdrażasz CI/CD z użyciem Terraform i Databricks Asset Bundles. Pracujesz w zespole z Data Engineerami i Tech Leadami, optymalizujesz wydajność Sparka i dbasz o jakość danych. Uwaga: oferta pochodzi od firmy consultingowej i nie precyzuje szczegółów projektu ani klienta końcowego — warto dopytać o stabilność i czas trwania zaangażowania.
- min. 7 lat doświadczenia w IT, w tym 5 lat jako Azure Data Engineer
- bardzo dobra znajomość Databricks
- doświadczenie z Apache Spark / PySpark
- doświadczenie w projektach przetwarzania Big Data
- doświadczenie w projektowaniu i rozwijaniu procesów ETL/ELT
- doświadczenie we wdrażaniu CI/CD dla aplikacji Databricks
- znajomość Terraform i/lub Databricks Asset Bundles
- angielski na poziomie B2 lub C1