Data Engineer en Ambiente GCP
Posted Updated
- Diseñar y liderar la construcción de pipelines de datos simples y complejos, asegurando escalabilidad, mantenibilidad y alineación a la arquitectura definida.
- Mantener, refactorizar y optimizar procesos ETL/ELT, mejorando tiempos de ejecución, confiabilidad y uso eficiente de recursos.
- Diseñar e implementar integraciones complejas entre diversas fuentes de datos (bases de datos, APIs, streaming, cloud, archivos).
- Definir estándares, reglas y métricas de calidad de datos, supervisando su correcta implementación en los pipelines.
- Diseñar e implementar mecanismos automáticos de validación, monitoreo y control de calidad de datos.
- Diseñar arquitecturas de datos (batch, streaming, lakehouse, etc.) alineadas a las necesidades del cliente y buenas prácticas del mercado.
- Analizar y optimizar el rendimiento de las soluciones de datos y los costos asociados a su operación en entornos cloud.
- Definir e implementar lineamientos de gobernanza, control de accesos, clasificación y protección de datos, en conjunto con el cliente.
- Actuar como referente técnico del proyecto, acompañando y guiando a perfiles Junior y Semi Senior.
- Interactuar con stakeholders del cliente para proponer mejoras, soluciones y evoluciones de la plataforma de datos.
Formación: Profesional en Ingeniería de Sistemas, Ingeniería de Datos, Informática, Estadística o carreras afines
Experiencia: Mínimo 4 años (deseable entre 4 y 6 años en ingeniería de datos y proyectos de datos en entornos productivos)
Competencias técnicas:
- Arquitectura de datos y diseño de soluciones escalables
- Ingeniería de datos avanzada (ETL/ELT, batch processing, streaming)
- SQL avanzado y optimización de consultas
- Integración de múltiples fuentes de datos (APIs, bases de datos, plataformas cloud)
- Diseño de pipelines de datos robustos y escalables
- Plataformas cloud de datos (GCP): Cloud Storage, BigQuery, Dataflow, Dataproc, Pub/Sub, Cloud Data Fusion, Cloud Composer (Apache Airflow)
- Gobernanza, calidad y seguridad de datos
- Optimización de performance y costos en entornos cloud
Habilidades blandas:
- Comunicación asertiva
- Orientación hacia los clientes
- Visión y habilidad de negociación
- Trabajo en equipo
- Liderazgo
- Planificación y organización
- Innovación
- Pensamiento analítico
- Capacidad de aprendizaje