Data Engineer Lead
Summary
The Data Engineer Lead will architect and implement enterprise-level data solutions using Databricks, Apache Airflow, and AWS. The role focuses on building automated CI/CD pipelines, ensuring data governance and quality, and maintaining system observability.
Capital Empresarial Horizonte Empresa Mexicana especialista en Recursos Humanos y Tecnologías de la Información solicita:
Data Engineer LeadPara laborar en CDMX/ GDL en esquema híbrido.
RequisitosIndispensables
- 10+ años de experiencia en roles de Data Engineering / Data Platform . Experiencia sólida y hands-on en:Databricks (Delta Lake, workflows, DAG).
- Apache Airflow / Astronomer.
- Python, SQL, dbt, AWS.
- Experiencia comprobable implementando frameworks de CI/CD (Harness, GitHub Actions, Azure DevOps).
- Comprensión profunda de:Gobernanza de datos (catálogos, linaje, contratos, metadatos).
- Técnicas de calidad de datos ( Data Quality ) y enmascaramiento de datos ( Data Masking ).
- Plataformas de datos empresariales y ecosistemas de Data Marketplace .
- Experiencia en integraciones basadas en APIs (ej. sistemas de derechos/acceso como AccessCentral ).
- Manejo de herramientas de monitoreo y observabilidad (ej. Datadog ).
Responsabilidades
- Liderar la arquitectura, desarrollo e implementación de soluciones de Data Engineering y Data Platform a nivel empresarial.
- Construir y mantener workflows, DAGs y pipelines de procesamiento con Databricks (Delta Lake) y Apache Airflow / Astronomer.
- Desarrollar y optimizar modelos y transformaciones de datos utilizando Python, SQL, dbt sobre infraestructura en AWS.
- Diseñar e implementar pipelines automatizados de CI/CD utilizando Harness, GitHub Actions o Azure DevOps.
- Implementar estrategias y controles de gobernanza de datos, linaje, contratos de datos, metadatos, calidad de datos y técnicas de enmascaramiento ( masking ).
- Arquitectar e integrar plataformas empresariales de datos y ecosistemas de Data Marketplace .
- Diseñar e implementar integraciones basadas en APIs con sistemas de entitlement (ej. AccessCentral).
- Configurar, supervisar y mantener la observabilidad y monitoreo continuo de las plataformas con herramientas como Datadog.
Ofrecemos:
- Horario de Oficina
- Esquema 100% nómina
- Sueldo abierto a negociación de acuerdo a experiencia
- Prestaciones de Ley
- Prestaciones superiores (SGMM familiar, SV 1 millón, Vales de despensa, 30 días de aguinaldo, PTU)