Data Engineer – Cloud & Databricks
Summary
Bismart, a tech-based business consultancy specialized in Data Management & Analytics, seeks a Data Engineer to design, build and optimize ETL/ELT pipelines and cloud data architectures on Microsoft Azure, AWS and Databricks for national and international client projects. Core stack: Spark/PySpark, SQL, Python and Data Lake/Lakehouse architectures.
En Bismart somos una consultora de negocio con base tecnológica especializada en Data Management & Analytics, analítica avanzada, Inteligencia Artificial y gobierno del dato.
Buscamos incorporar un/a Data Engineer para participar en proyectos de transformación y explotación de datos, trabajando con diferentes tecnologías y arquitecturas cloud, principalmente en entornos Microsoft Azure y AWS, así como con Databricks.
Buscamos un perfil técnico con experiencia en ingeniería de datos, acostumbrado a trabajar con grandes volúmenes de información y capaz de participar en proyectos de datos de principio a fin.
El perfil que buscamos puede estar ubicado en Barcelona o Madrid.
- Diseñar, desarrollar y mantener pipelines de datos y procesos ETL/ELT.
- Participar en el diseño e implementación de arquitecturas de datos cloud.
- Desarrollar procesos de ingesta, transformación y procesamiento de datos.
- Trabajar con diferentes servicios y tecnologías de Microsoft Azure y/o AWS.
- Desarrollar soluciones de procesamiento de datos utilizando Apache Spark / PySpark.
- Trabajar con Databricks en procesos de ingeniería y transformación de datos.
- Desarrollar consultas y procesos utilizando SQL y Python.
- Trabajar con arquitecturas Data Lake / Lakehouse.
- Diseñar soluciones escalables, eficientes y robustas para el procesamiento de datos.
- Monitorizar y optimizar pipelines y procesos de datos.
- Participar en proyectos de clientes, colaborando con equipos técnicos y de negocio.
- Trabajar en proyectos internacionales, participando en reuniones y colaborando con clientes y equipos de diferentes países.
- Formación universitaria en Ingeniería Informática, Ingeniería de Datos, Matemáticas, Física, Estadística, Telecomunicaciones o similar.
- Experiencia profesional como Data Engineer.
- Experiencia en el diseño y desarrollo de procesos ETL/ELT y pipelines de datos.
- Experiencia trabajando con entornos cloud, especialmente Microsoft Azure y/o AWS.
- Conocimientos y experiencia con herramientas y servicios de datos en cloud, como:
- Experiencia con Databricks.
- Conocimientos sólidos de Apache Spark / PySpark.
- Buen nivel de SQL.
- Experiencia con Python aplicado a procesos de datos.
- Conocimientos de arquitecturas Data Lake / Lakehouse.
- Inglés alto (mínimo C1), tanto oral como escrito, imprescindible para participar en proyectos internacionales y trabajar directamente con clientes y equipos internacionales.
- Capacidad para trabajar en equipo, autonomía y orientación a la resolución de problemas.
Se valorará especialmente
- Experiencia trabajando tanto con Azure como con AWS.
- Experiencia avanzada con Databricks y Delta Lake.
- Conocimientos de Unity Catalog.
- Experiencia con herramientas de orquestación como Apache Airflow o AWS Step Functions.
- Experiencia con Microsoft Fabric.
- Conocimientos de Terraform, Git y CI/CD.
- Experiencia con tecnologías de streaming como Kafka o Amazon Kinesis.
- Certificaciones de Azure, AWS o Databricks.
- Experiencia previa en proyectos internacionales o entornos multiculturales.
- Incorporación a una compañía especializada en Data & Analytics, IA y gobierno del dato.
- Posibilidad de trabajar con diferentes tecnologías y arquitecturas cloud.
- Proyectos nacionales e internacionales.
- Entorno de trabajo dinámico y multidisciplinar.
- Modelo de trabajo híbrido.
- Desarrollo profesional y formación continua.