Engenheiro(a) de Dados Sr
Posted Updated
Description
Decision procura Engenheiro(a) de Dados Sênior para atuação remota, contrato CLT, integrando programa de migração do DW legado para lakehouse Databricks. o foco é reimplementar pipelines em PySpark/Spark SQL e reconciliação com o DW existente, sem lift-and-shift.
O profissional vai liderar a engenharia reversa de jobs atuais, migrando regras de negócio para Spark e apoiando rotação de waves por domínio com governança de qualidade de dados e integração com AWS/Azure.
PySpark e Python avançados com pipelines batch em escala. SQL avançado e modelagem de dados em DW. Databricks e Delta Lake com produção e arquitetura bronze/silver/gold. Migração de ETL legados para Spark sem lift-and-shift. Ecossistema AWS: S3/Glue/EMR/Athena/Lambda/DMS e Step Functions, plus Azure Synapse. Testes automatizados e governança de dados para paridade com legacy. Certificações Databricks desejáveis.Skills
Sign in to read and join the discussion.