Azure Data Engineer - ETL/ELT & SSIS Expert
Posted
Summary
Design, build, and maintain ETL/ELT pipelines in SSIS and Azure Data Factory, integrating data from on-premise, cloud, and API sources while defining development standards, ensuring data quality, and optimizing performance and governance. Requires 2+ years with ADF/SSIS, strong SQL/T-SQL, and Python familiarity.
- Diseñar, desarrollar, mantener y evolucionar procesos ETL/ELT en SSIS
- Diseñar, desarrollar y mantener pipelines de ETL/ELT en Azure Data Factory
- Definir e implantar una metodología de desarrollo para SSIS y Azure Data Factory, incluyendo estándares técnicos, buenas prácticas, nomenclaturas, control de versiones, despliegues y documentación.
- Conectar, transformar y orquestar datos procedentes de múltiples fuentes (onpremise, cloud, APIs).
- Automatizar flujos de datos y asegurar su correcta ejecución, monitorización y gestión de incidencias.
- Realizar análisis y validaciones de calidad de datos en todas las fases de las ETLs.
- Optimizar el rendimiento de los pipelines y de los recursos asociados (almacén amiento, cómputo, etc.).
- Aplicar principios de data governance, seguridad y cumplimiento normativo en los procesos de integración de datos.
- Documentar los desarrollos y colaborar en la mejora continua de los procesos existentes.
- Experiencia demostrable (2+ años) con Azure Data Factory y SSIS.
- Conocimiento práctico de servicios de Azure relacionados:
- Sólidos conocimientos de SQL y TSQL, incluyendo desarrollo y optimización de procedimientos almacenados en Microsoft SQL Server.
- Experiencia en optimización de procesos ETL y análisis de rendimiento.
- Familiaridad con Python para scripting y automatización.
- Conocimientos de modelado de datos, data warehousing y estructuras relacional es y no relacionales.
- Experiencia con herramientas de control de versiones (ej. Git, Azure DevOps).
- Comprensión de principios de arquitectura cloud, escalabilidad y costes.