Data Engineer: Python, Airflow & Azure Databricks Lakehouse
Summary
Develops and optimizes data pipelines, builds data products, and migrates an on-premise platform to Azure Databricks Lakehouse using Python and Airflow.
PROSTAFF Schweiz GmbH sucht einen erfahrenen Data Engineer in Basel, um eine bestehende On-Premise-Datenplattform weiterzuentwickeln und in eine moderne Azure Databricks Lakehouse-Architektur zu transformieren.
Zu den Aufgaben gehören der Aufbau von Data Products, Ingestion- und Transformationspipelines, Gewährleistung von Datenqualität und Performance sowie die Entwicklung von Airflow-DAGs. Sie arbeiten eng mit Data Architect, DevOps Engineer und Product Owner zusammen.