Data Engineer - Databricks Lakehouse (Remote, Growth)
Summary
A mid-level data engineer migrates a 15-year-old data warehouse to a governed Databricks Lakehouse, building batch and streaming pipelines with PySpark and Delta Lake using a Bronze/Silver/Gold medallion architecture. Daily work involves Python/SQL, Spark job optimization, and ensuring data governance, quality, and parity during migration.
AgileEngine busca un Data Engineer de nivel medio para modernizar un data warehouse de 15 años hacia un Lakehouse gobernado en Databricks. Construirás pipelines batch y streaming usando PySpark y Delta Lake, siguiendo una arquitectura medallion Bronze/Silver/Gold.
También se explorará uso de herramientas IA para acelerar el desarrollo. Trabajarás con Python/SQL, optimizarás trabajos de Spark y garantizarás gobernanza, calidad de datos y paridad durante la migración.
#J-18808-Ljbffr