Senior Data Engineer, AWS
Summary
Build and maintain AWS-based data pipelines and Data Lake frameworks using Spark, Python, and Kafka to process batch and real-time data at scale.
- Participar en la evolución y mantenimiento del framework corporativo de Data Lake, garantizando su estabilidad, escalabilidad y rendimiento
- Diseñar, desarrollar y optimizar pipelines de datos batch y streaming sobre entornos AWS
- Implementar soluciones de procesamiento distribuido utilizando Spark y Python
- Integrar y explotar flujos de datos en tiempo real mediante Kafka
- Colaborar en la definición y mejora de la arquitectura de datos
- Monitorizar, analizar y resolver incidencias relacionadas con los procesos de ingesta y transformación de datos
Requirements
- Experiencia mínima de 5 años en proyectos Big Data y plataformas de datos
- Experiencia sólida en SQL, AWS, Spark y Python
- Conocimiento y experiencia trabajando con Kafka
- Experiencia en arquitecturas Data Lake
- Experiencia con formatos de almacenamiento como Iceberg o Delta Lake
- Capacidad para optimizar procesos de datos orientados al rendimiento y la escalabilidad
- Proactividad y capacidad de resolución de problemas
- Capacidad de trabajo en equipo
- Capacidad de comunicación clara en entornos técnicos
- Atención al detalle y enfoque en la calidad
- Organización y gestión eficiente del tiempo
Core Competencies
Demonstrates expertise in designing and optimizing data pipelines using AWS, Spark, and Python, while ensuring the stability and performance of Data Lake architectures. Strong problem-solving abilities and effective communication skills are essential for collaborating in technical environments.
Highest-signal resume keywords
- Big Data Projects
- AWS
- Spark
- Python
- Kafka
ATS Optimization Keywords
Hard Skills
- SQL
- Data Pipeline Development
- Data Lake Architecture
- Data Processing Optimization
- Batch Processing
- Streaming Data Processing
- Incident Resolution
- Data Transformation
- Performance Tuning
- Data Quality Assurance
Soft Skills
- Proactivity
- Problem-Solving
- Team Collaboration
- Clear Communication
- Attention to Detail
Industry Keywords
- Data Lake
- Big Data
- Data Architecture
- Data Ingestion
- Data Transformation
Tools & Technologies
- AWS
- Spark
- Kafka
- Iceberg
- Delta Lake