Data Engineer AWS
Posted
Description
¿Cuáles serán tus principales retos?
- Desarrollar e implementar soluciones de integración de datos que permitan procesar grandes cantidades de información de manera eficiente, considerando fuentes y formatos diversos.
- Administrar y dar seguimiento a los flujos de procesamiento de información, identificando oportunidades de mejora y asegurando su ejecución oportuna.
- Construir mecanismos de extracción y procesamiento de datos mediante consultas, código y herramientas especializadas que faciliten su disponibilidad para el análisis.
- Definir e implementar estructuras de almacenamiento y procesamiento de datos que respondan a las demandas actuales y futuras del negocio.
- Optimizar los mecanismos de procesamiento de información para atender requerimientos de cargas periódicas y actualización continua.
- Implementar esquemas de automatización y programación de tareas para gestionar las dependencias y ejecuciones de los procesos de datos.
- Desarrollar soluciones mediante SQL y otros lenguajes de programación que permitan mejorar el rendimiento y aprovechamiento de la información.
- Establecer procedimientos de revisión y aseguramiento de datos para detectar inconsistencias, prevenir errores y mantener la confiabilidad de la información.
- Conectar diferentes repositorios y plataformas de información, facilitando el intercambio de datos y manteniendo el control sobre su recorrido y disponibilidad.
¿Qué perfil buscamos?
- Bachiller en Ingeniería de Sistemas, Informática, Software, Industrial, Ciencias de la Computación, Estadística o carreras afines.
- Experiencia mínima de 3 años en ingeniería de datos o administración de plataformas de información.
- Al menos 2 años de experiencia implementando y administrando Data Warehouse y/o Data Lake.
- Experiencia diseñando arquitecturas de datos en entornos Cloud.
- Conocimientos de Gobierno de Datos: calidad, catalogación, trazabilidad y ciclo de vida de la información.
- Manejo de procesos ETL/ELT y herramientas de Analítica y Business Intelligence.
- Conocimientos de SQL y Python y/o PySpark a nivel intermedio.
- Conocimiento de Docker y tecnologías de contenedores.
- Conocimientos de DataOps, automatización y orquestación de procesos de datos.
- Experiencia desarrollando y optimizando pipelines para procesamiento batch y/o near real-time.
- Conocimiento de servicios AWS: Glue, Athena, ECS, ECR, Step Functions y Lake Formation.
- Manejo de metodologías ágiles.
- Deseable: experiencia en banca, sector financiero, retail o industrias similares.
- Deseable: conocimientos de seguridad de la información, protección de datos y control de accesos.
- Deseable: experiencia implementando soluciones de datos en AWS Cloud.
- Deseable: manejo de Git y herramientas CI/CD.
Skills
Sign in to read and join the discussion.