Senior Data Engineer With Azure
Summary
Senior Data Engineer building and optimizing scalable Lakehouse solutions on Azure Databricks: batch and streaming pipelines with Spark, PySpark, SQL and Delta Lake (Medallion Architecture), plus performance tuning. Requires Databricks Certified Data Engineer Professional; hybrid/remote in Spain at €45,000 gross/year.
Data Engineer Senior | Azure Databricks Certified Professional
España | Híbrido / Remoto
Aumente sus posibilidades de llegar a la fase de entrevista leyendo la descripción completa del puesto y enviando su solicitud sin demora.
45.000€/BA
Proyecto estratégico de transformación y modernización de plataformas Data
¿Te apasiona construir plataformas de datos escalables sobre Databricks?
Buscamos un/a Data Engineer Senior especializado/a en Azure Databricks para incorporarse a proyectos de alto impacto donde participarás en el diseño, construcción y optimización de soluciones Lakehouse de última generación.
Tendrás la oportunidad de trabajar con arquitecturas modernas, grandes volúmenes de información y tecnologías cloud líderes, colaborando con equipos multidisciplinares de datos, negocio y analítica avanzada.
Tu misión
Diseñar y evolucionar soluciones de ingeniería del dato sobre entornos Databricks, garantizando la calidad, escalabilidad, rendimiento y gobernanza de los datos de la organización.
Principales responsabilidades
Diseñar, desarrollar y mantener pipelines de datos batch y streaming sobre Databricks.
Implementar procesos de ingesta, transformación y carga de datos mediante Apache Spark, PySpark y SQL.
Diseñar y evolucionar arquitecturas Lakehouse basadas en Delta Lake.
Construir modelos de datos siguiendo el enfoque Medallion Architecture (Bronze, Silver y Gold).
Desarrollar y optimizar notebooks, jobs y workflows en Databricks.
Aplicar técnicas avanzadas de optimización de rendimiento:
Particionamiento
Z-Ordering
Liquid Clustering
Caching
File Compaction
Participar en la definición de estándares de desarrollo, despliegue, versionado y documentación.
Colaborar con arquitectos de datos, analistas, científicos de datos y responsables de negocio.
Experiencia profesional:
Más de 3 años en proyectos de Ingeniería del Dato
Al menos 2 años trabajando con Databricks en entornos productivos
Certificación obligatoria:
Databricks Certified Data Engineer Professional
Stack tecnológico
Databricks & Data Engineering
Azure Databricks
Databricks Data Intelligence Platform
Apache Spark
PySpark
Databricks SQL
Delta Lake
Delta Tables
Delta Live Tables / Lakeflow Declarative Pipelines
Databricks Asset Bundles
Cloud & Ecosistema Azure
Azure Data Lake Storage (ADLS)
Azure Data Factory
Microsoft Fabric
Azure Key Vault
Azure DevOps
Cloud Complementario
AWS
Databricks on AWS
Valoraremos positivamente
Experiencia en migraciones desde plataformas ETL tradicionales hacia Databricks.
Integración con Kafka u otras plataformas de streaming.
Conocimientos de dbt.
Experiencia con Airflow.
Experiencia avanzada en Azure Data Factory.
Terraform para aprovisionamiento y automatización de recursos Databricks.
¿Qué ofrecemos?
Participación en proyectos de transformación digital de gran escala.
Trabajo con arquitecturas Data Lakehouse de última generación.
Entorno tecnológico innovador y orientado a la excelencia técnica.
Formación continua y certificaciones.
Plan de desarrollo profesional y crecimiento interno.
Flexibilidad laboral y conciliación. xqbhyrx
Equipo altamente especializado en Data & Analytics.
Si quieres formar parte de proyectos de datos de nueva generación y trabajar con uno de los ecosistemas más demandados del mercado, queremos conocerte .
Aplica ahora y lleva tu carrera en Data Engineering al siguiente nivel