Data Engineer
Summary
Builds and maintains ETL pipelines for business data, optimizing performance and scalability using Spark/Hadoop; collaborates on cloud-based data processing and automation.
Overview
La siguiente información ofrece un resumen de las habilidades, cualidades y cualificaciones necesarias para este puesto.
Requisitos técnicos
Importante consultora en tecnología busca un Data Engineer con mínimo 3 años de experiencia como desarrollador y mínimo 1 año de experiencia trabajando en proyectos de Big Data.
La siguiente información ofrece un resumen de las habilidades, cualidades y cualificaciones necesarias para este puesto.
Requisitos técnicos
- Experiencia con las tecnologías Spark, YARN, Hadoop, Hive.
- Experiencia con bases de datos relacionales (MySQL).
- Lenguajes de programación.
- Programaciónfuncional.
- Experiencia con Linux y shell scripting.
- Familiarizado con entornos cloud, particularmente Google Cloud Platform (se valorarán conocimientos de AWS o Azure).
- Familiarizado con Agile, GitHub, JIRA/Redmine, ContinuousIntegration).
- Participará en el desarrollo y mantenimiento de procesos de extracción, transformación y carga (ETL) sobre datos provenientes de las distintas áreas de negocio.
- Análisis y diseño de los procesos ETL en base a los requerimientos funcionales, teniendo en cuenta también los no funcionales como el rendimiento o la escalabilidad.
- Desarrollo y pruebas unitarias.
- Participación en revisiones de código.
- Automatización de procesos y soporte a IT en el despliegue y mantenimiento.
Contrato a termino indefinido. xhfqzwm Modalidad Hibrida.