Aws Data Engineer - Hybrid Madrid | Spark, Python, Airflow
Posted 1
view
Summary
Data engineer (hybrid in Madrid) at ABANCA Seguros Generales working on a data-platform integration project: building ingestion/transformation pipelines in lakehouse environments, plus database administration, user access/RBAC management, and support for dev teams. Core stack: SQL, SingleStore/MemSQL, PySpark, Kinesis/Kafka, Iceberg, Dagster.
- Trabajar en un proyecto de integración de plataformas de datos, trabajando con entornos lakehouse, pipelines de ingesta y transformación de datos.- Combinar tareas de administración de base de datos, gestión de accesos, soporte a equipos de desarrollo y creación de pipelines de datos.RequirementsExperiencia trabajando con Lakehouse - SingleStore / MemSQL o bases de datos distribuidas/analíticas similares.Conocimientos sólidos de SQL.Experiencia en gestión de usuarios, permisos, roles, RBAC o administración de bases de datos.Experiencia en creación y mantenimiento de pipelines de datos.Conocimientos de Kinesis o tecnologías similares de streaming como Kafka.Experiencia con PySpark.Conocimientos de entornos Lakehouse.Valorable experiencia con Apache Iceberg y Dagster.Valorable experiencia con Go.Inglés B2 alto, necesario para mantener conversaciones técnicas con el equipo.Core CompetenciesDemonstrates expertise in data integration projects, particularly within Lakehouse environments, and possesses strong skills in SQL, data pipeline creation, and database administration. Proficient in managing user access and permissions while supporting development teams with data transformation tasks.Highest-signal resume keywordsLakehouse ExperienceSQL ProficiencyData Pipeline CreationUser Management and RBACPySpark ExperienceATS Optimization KeywordsHard SkillsSQLData Pipeline CreationDatabase AdministrationUser ManagementRBACPySparkKinesisApache IcebergDagsterGoTools & TechnologiesLakehouseSingleStoreMemSQLKafka