Data Engineer - Azure
Summary
Builds and optimizes data pipelines on Azure/Data Lake using PySpark/Scala for large-scale batch processing, ensuring cost-efficient distributed workflows and production deployments with DevSecOps.
¡Sé parte de nuestro equipo! More digital. More human. More Minsait.Somos una empresa líder global de tecnología y consultoría digital que conecta personas, tecnología y negocios para generar crecimiento, transformación e impacto positivo y sostenible. El futuro se construye con talento. Y en Indra Group, estamos en la búsqueda de un: Data Engineer (Azure/Databricks):
Requisitos:
- Experiencia de 3 años a más en implementación de soluciones con las tecnologías requeridas, habiendo realizado las siguientes actividades.
- Análisis y desarrollo de flujos de Ingesta y transformación de datos en Data lake o Lake House en plataformas On Premise y/o Cloud (AZURE).
- Análisis y Desarrollo utilizando procesamiento distribuido en Spark usando PySpark y Scala (Batch).
- Optimización de los procesos a desarrollar o existentes con un enfoque de optimización de costos (tiempo de procesamiento y uso del clúster) con Spark.
- Análisis y schedulamiento de los procesos de acuerdo a las criterias definidas por los usuarios. Despliegue soluciones en producción haciendo uso de herramientas de integración y despliegue continuo (DevSecOps).
- Desarrollo de soluciones transversales para la mejora continua del framework de desarrollo y despliegue de soluciones.
- Desarrollo de buenas prácticas, frameworks y estándares de desarrollo en Spark.
- Consultoría y asesoría técnica en la estrategia de implementación de soluciones en plataformas distribuidas On Premise y/o Cloud (AZURE).
Beneficios:
- EPS al 100%
- Acceso total a Udemy para seguir aprendiendo
- Descuentos corporativos exclusivos
- Asesorías virtuales con psicólogo y nutricionista
- Modalidad híbrida.
- Horario de trabajo: De lunes a viernes de 9:0 0am a 6:30pm