Senior Data Engineer Big Data & Cloud
Posted 85
views
Summary
Senior data engineer owning the architecture and development of a big data platform built on Cloudera/Spark with part of it on Google Cloud Platform, in a hybrid Madrid role. Day-to-day covers batch and real-time pipelines, Spark/Scala and dbt/SQL/Python development with BigQuery, data governance, Control-M scheduling and client-facing technical work.
Senior Data Engineer Big Data & Cloud
Por favor, presente su candidatura sin demora si su perfil encaja bien con este puesto, debido al alto nivel de interés.
Trabajo Hibrido en madrid
Contrato indefinido
Responsabilidades
Por favor, presente su candidatura sin demora si su perfil encaja bien con este puesto, debido al alto nivel de interés.
Trabajo Hibrido en madrid
Contrato indefinido
Buscamos un perfil senior, con más de 3 años de experiencia, que asuma con autonomía la arquitectura y el desarrollo de una plataforma de datos centrada en Big Data (Cloudera / Spark) y con parte en Google Cloud Platform.
Responsabilidades
- Diseñar y evolucionar arquitecturas de datos batch y real time sobre Cloudera y GCP.
- Implantar y mantener plataformas de ingesta, almacenamiento y agregación de datos con Spark y BigQuery.
- Desarrollar, probar, desplegar y documentar procesos en Spark/Scala y en dbt/SQL/Python.
- Definir las bases arquitecturales y los procesos de gobierno del dato.
- Estimar la complejidad de las funcionalidades y ayudar al Product Owner a priorizar el backlog. Ser el interlocutor técnico con el cliente, IT y negocio, y participar en las demos.
- Resolver incidencias de producción y optimizar procesos productivos.
- Planificar y supervisar la ejecución de procesos con Control-M. xqbhyrx Orientar técnicamente al resto del equipo y velar por las buenas prácticas y las normas del cliente.
Skills
Sign in to read and join the discussion.