Data Engineer Manager | Azure Databricks

Como Data Engineer Manager, você atuará em iniciativas estratégicas de modernização e migração de dados, contribuindo para a transformação digital de grandes organizações por meio de soluções modernas baseadas em Microsoft Azure e Azure Databricks.

Esta posição combina forte atuação técnica e hands-on, sendo responsável pelo desenvolvimento, migração e validação de ativos de dados, sempre garantindo qualidade, performance, governança e aderência às melhores práticas de engenharia de dados. Você trabalhará em estreita colaboração com Tech Leads, Arquitetos, Business Analysts e demais membros da squad para construir soluções robustas, escaláveis e orientadas ao negócio.

Faça parte de uma equipe apaixonada por dados, inovação e tecnologia, atuando em projetos de modernização que impulsionam resultados reais para nossos clientes. Na Avanade, você encontrará um ambiente colaborativo, desafiador e com oportunidades contínuas de crescimento profissional.

Together we do what matters.

Saiba mais sobre alguns de nossos benefícios:

• Vale refeição ou alimentação;
• Cartão Multibenefícios até Consultor Sênior;
• Convênio médico e odontológico;
• Certificações e treinamentos;
• Seguro de Vida;
• Previdência Privada;
• Avababy: acompanhamento da gestação e kit para os novos pais e mães Avanade;
• Participação nos resultados da empresa;
• Wellhub;
• Auxílio Creche;
• Orientador de Carreira - Mentoria de carreira;
• Política de Birthday Off em seu aniversário;
• Sessões de Bem-Estar;
• Para função gerencial ou superior - Veículo corporativo, estacionamento e auxílio combustível.
  ​

Responsabilidades:

• Desenvolver e migrar workloads de dados para Azure Databricks;
• Participar da modernização de scripts Python, processos de ingestão batch e rotinas ETL/ELT;
• Implementar pipelines de dados escaláveis e resilientes utilizando Apache Spark e Databricks;
• Realizar conversão e adequação de scripts legados para arquiteturas modernas de dados;
• Desenvolver transformações utilizando Python, SQL e Spark;
• Apoiar integrações com sistemas corporativos, APIs e bancos de dados relacionais;
• Participar da implementação de práticas de observabilidade, monitoramento e governança de dados;
• Contribuir para a modelagem de dados em arquiteturas Lakehouse utilizando Delta Lake;
• Executar testes unitários e integrados para validação dos ativos migrados;
• Apoiar atividades de homologação, estabilização e correção de defeitos;
• Garantir a qualidade, rastreabilidade e documentação das soluções desenvolvidas;
• Colaborar com equipes multidisciplinares em ambiente ágil;
• Seguir padrões definidos pela arquitetura e liderança técnica do projeto.

.

Habilidades e experiências

Requisitos obrigatórios

• Experiência em Engenharia de Dados e desenvolvimento de pipelines analíticos;
• Conhecimento em Azure Databricks;
• Experiência com Apache Spark para processamento distribuído;
• Domínio de Python e SQL;
• Experiência no desenvolvimento de processos ETL/ELT;
• Conhecimento em modelagem de dados para ambientes analíticos;
• Experiência com dados estruturados e semiestruturados;
• Conhecimento de Git e versionamento de código;
• Familiaridade com práticas de desenvolvimento em ambientes cloud;
• Experiência com consumo e integração de APIs;
• Conhecimento de bancos de dados relacionais e SQL avançado;
• Vivência em metodologias ágeis (Scrum, Kanban ou similares);
• Inglês avançado obrigatório (English required).
  

Diferenciais

• Experiência em projetos de migração de ambientes Hadoop ou Cloudera;
• Vivência no segmento financeiro, bancário ou fintech;
• Certificações Databricks;
• Certificações Microsoft Azure.

.