Engenheiro(A) De Dados Databricks | Pleno/Sênior (Remoto)
Posted Updated
Description
A Sauter Brasil procura Engenheiro(a) de Dados para projetar, construir e otimizar pipelines e plataformas de dados na AWS com Databricks. Atuar em ingestão, transformação, governança e performance, entregando dados confiáveis para analytics, BI e machine learning.
Desenvolver pipelines batch/streaming, arquiteturas medallion e tuning de Spark, colaborando com Analytics Engineering, Data Science e Engenharia de Software para manter qualidade e observabilidade de dados.
Desenvolver e manter pipelines de dados (batch e streaming) utilizando Databricks e Apache Spark. Projetar e implementar arquiteturas de dados seguindo o padrão medallion (bronze, silver, gold). Otimizar performance de jobs Spark e consultas SQL em larga escala. Implementar e manter processos de ETL/ELT orquestrados (Databricks Workflows, Airflow, etc.). Garantir qualidade, consistência e governança dos dados (Unity Catalog, testes de dados). Colaborar com times de Analytics Engineering, Data Science e Engenharia de Software. Documentar processos, arquiteturas e decisões técnicas. Participar de revisões de código e boas práticas de engenharia de dados. Experiência comprovada de 3+ anos em engenharia de dados. Domínio em Databricks, Spark e pipelines de dados (batch e streaming). Conhecimento em AWS (S3, Glue, IAM, Lambda, Athena/Redshift) e Delta Lake. Governança de dados com Unity Catalog. Git, CI/CD e infraestrutura como código (Terraform). Inglês técnico em nível intermediário.Skills
Sign in to read and join the discussion.