Data Engineer II
Posted
Description
Requisitos del Perfil
- Python y SQL con nivel intermedio-avanzado.
- Experiencia con orquestación de pipelines usando Prefect y procesamiento de datos con Polars y Spark.
- Manejo de bases de datos relacionales y conocimiento de SAP Service Layer.
- Conocimiento de AWS: S3, EC2, ECS, Fargate y ECR para publicación y mantenimiento de pipelines en producción.
- Docker (obligatorio) y control de versiones con GitHub, incluyendo flujos de CI/CD.
- Experiencia en consumo de datos desde S3, réplicas de bases de datos y desarrollo de web scrapers.
- Fundamentos de arquitectura de datos: ETL/ELT, modelado dimensional y conceptos de Data Lake / Data Warehouse.
- Buenas prácticas de calidad de código: uso de ruff como linter, revisión por Pull Request y documentación técnica.
Requisitos Académicos
- Ingeniería en Sistemas, Computación o Informática.
- 2 a 3 años de experiencia en ingeniería de datos o roles similares (desarrollo y mantenimiento de pipelines).
Principales Funciones del Puesto
- Mantener y dar soporte a los pipelines de datos existentes en producción.
- Diseñar e implementar de forma autónoma nuevos pipelines de datos de mediana complejidad.
- Actualizar y publicar pipelines en el entorno de orquestación en AWS (S3, EC2, ECS, Fargate).
- Proponer y desarrollar métodos de conexión a los datos del cliente (S3, réplicas de bases de datos, web scrapers).
- Liderar reuniones técnicas con el equipo del cliente para definir accesos y forma de conexión a los datos.
- Colaborar con modeladores de IA, desarrolladores de software y el VMO bajo metodología Scrum en Jira.
- Optimizar consultas y procesos existentes, y proponer mejoras de arquitectura y patrones de diseño.
- Garantizar la calidad del código mediante revisión de Pull Requests y documentación técnica.
Condiciones laborales
- Modalidad 100% presencial.
- Tiempo completo (36 horas semanales de lunes a jueves).
- Computadora propia.
- Contrato por servicios.
- Honorarios por servicios según experiencia.
Skills
Sign in to read and join the discussion.