Data Engineer
Posted 6
views
Summary
Data engineer developing and optimizing Big Data pipelines on AWS using PySpark, Spark Streaming, Kafka, SQL, and table formats like Iceberg/Delta Lake for large-volume data processing. Fully remote role (anywhere in Spain) on a long-term project with a specialized technical team.
* Data Engineer (AWS / PySpark / Kafka) * 100% remoto Sobre el perfil: Buscamos un/a Desarrollador/a Big Data con experiencia en entornos AWS para incorporarse a un proyecto de gran envergadura. Formarás parte de un equipo técnico especializado en el desarrollo, mantenimiento y optimización de soluciones Big Data, trabajando con tecnologías como PySpark, Spark Streaming, Kafka y AWS para el procesamiento de grandes volúmenes de datos. Funciones:
Desplácese hacia abajo para obtener una visión general completa de lo que requerirá este trabajo. ¿Es usted el candidato adecuado para esta oportunidad?
- Desarrollo y mantenimiento de procesos de datos utilizando PySpark.
- Diseño, construcción y optimización de pipelines de datos en entornos AWS.
- Desarrollo de procesos ETL/ELT para el tratamiento de grandes volúmenes de información.
- Implementación de soluciones de procesamiento en tiempo real mediante Spark Streaming y Kafka.
- Transformación y explotación de datos mediante SQL.
- Gestión de tablas y almacenamiento utilizando Iceberg y/o Delta Lake.
- Automatización de procesos mediante Python.
- Colaboración con equipos multidisciplinares bajo metodologías ágiles.
- Control de versiones y colaboración mediante GitHub. Perfil buscado (H/M/D):
- Más de 3 años de experiencia Big Data o Ingeniería de Datos.
- Experiencia avanzada en Python y PySpark.
- Experiencia avanzada en AWS (Amazon Web Services).
- Experiencia con Apache Spark y Spark Streaming.
- Dominio de SQL para transformación y explotación de datos.
- Experiencia con Apache Kafka o sistemas de mensajería similares.
- Experiencia trabajando con Iceberg y/o Delta Lake.
- Conocimientos de GitHub para control de versiones.
- Valorable experiencia con Scala.
- Qué ofrecemos
Qué ofrecemos:
- Proyecto de larga duración con tecnologías Big Data de última generación.
- Modalidad 100% remota desde cualquier punto de España.
- Incorporación a un equipo altamente especializado.
- Entorno tecnológico innovador y colaborativo.
- Oportunidades de crecimiento profesional y aprendizaje continuo. xqbhyrx
- Salario competitivo en función de la experiencia aportada. Siguientes pasos: * Si estás interesado en esta oferta, haz click en "aplicar ahora" para enviar una copia actualizada de tu CV.