Ai Data Engineer
Posted Updated
Summary
Data engineer at ABANCA's insurance arm, working on a data platform integration project: building lakehouse environments and ingestion/transformation pipelines, plus database administration, access/RBAC management and support for dev teams. Core stack: SQL, SingleStore/MemSQL, PySpark, Kafka/Kinesis, with Iceberg and Dagster valued.
- Trabajar en un proyecto de integración de plataformas de datos, trabajando con entornos lakehouse, pipelines de ingesta y transformación de datos.- Combinar tareas de administración de base de datos, gestión de accesos, soporte a equipos de desarrollo y creación de pipelines de datos.RequirementsExperiencia trabajando con Lakehouse - SingleStore / MemSQL o bases de datos distribuidas/analíticas similares.Conocimientos sólidos de SQL.Experiencia en gestión de usuarios, permisos, roles, RBAC o administración de bases de datos.Experiencia en creación y mantenimiento de pipelines de datos.Conocimientos de Kinesis o tecnologías similares de streaming como Kafka.Experiencia con PySpark.Conocimientos de entornos Lakehouse.Valorable experiencia con Apache Iceberg y Dagster.Valorable experiencia con Go.Inglés B2 alto, necesario para mantener conversaciones técnicas con el equipo.Core CompetenciesDemonstrates expertise in data integration projects, particularly within Lakehouse environments, and possesses strong skills in SQL, data pipeline creation, and database administration. Proficient in managing user access and permissions while supporting development teams with data transformation tasks.Highest-signal resume keywordsLakehouse ExperienceSQL ProficiencyData Pipeline CreationUser Management and RBACPySpark ExperienceATS Optimization KeywordsHard SkillsSQLData Pipeline CreationDatabase AdministrationUser ManagementRBACPySparkKinesisApache IcebergDagsterGoTools & TechnologiesLakehouseSingleStoreMemSQLKafka