Senior Data Engineering Expert – Data Hub Finance, AI Transformation
Summary
Designs, builds, and maintains data pipelines for a finance-focused AI platform, ensuring reliable ingestion, transformation, and governance of large-scale datasets using Spark, Scala, and HDFS.
Responsibilities
- Diseñar, implementar y operar los procesos de ingesta, transformación y disponibilidad de datos en la plataforma analítica.
- Asegurar la calidad, trazabilidad, seguridad y gobierno de la información.
- Alinear las ingestas con la estrategia de datos de la organización, garantizando información confiable y oportuna.
Requirements
- Profesional en Ingeniería de Sistemas, Ingeniería Electrónica, Ingeniería de Software o carreras afines.
- Mínimo 3 años de experiencia en entornos Big Data, integración de datos, bases de datos relacionales y herramientas de analítica o Business Intelligence.
- Experiencia en implementación, operación y soporte de procesos de ingesta y transformación de datos.
- Conocimientos en arquitecturas y ecosistemas Big Data.
- Herramientas de procesamiento de datos (Spark, Scala, HDFS).
- Herramientas de modelado de datos (PowerDesigner o equivalentes).
- Gestión de Trusted Data Sources.
- Implementación de reglas de calidad y gobernanza de datos.
- Administración de metadatos y Data Dictionary.
- Conocimiento de CI/CD y gestión de versiones.
Core Competencies
Demonstrates expertise in designing, implementing, and operating data ingestion and transformation processes within analytical platforms, ensuring data quality, traceability, security, and governance. Proficient in Big Data environments and data integration, with a strong focus on reliable and timely information delivery.
Tools & Technologies
- Spark
- Scala
- HDFS
- PowerDesigner