Data Engineer Warrior
Posted Updated
Summary
Build and optimize scalable data pipelines and ETL/ELT workflows in Databricks on AWS, processing large datasets with PySpark, applying data quality checks, monitoring, and governance best practices, while collaborating with Analytics and Product teams in a hybrid work setup in Portugal.
Estamos à procura de um(a) Data Engineer Warrior para reforçar a nossa Tribo de Data Analytics!
As competências que procuramos em ti:
- -Experiência sólida em AWS, Databricks e processamento de Big Data;
- -Experiência no desenho e manutenção de pipelines de dados escaláveis;
- -Forte capacidade de trabalho com grandes conjuntos de dados (datasets);
- -Domínio na implementação de processos eficientes de ETL/ELT com PySpark;
- -Conhecimentos em transformação e otimização de dados;
- -Experiência na aplicação de boas práticas de qualidade e governação de dados;
- -Capacidade de colaboração com equipas multidisciplinares (Analytics e Produto).
O que farás no teu dia a dia:
- -Construir e otimizar fluxos de trabalho de dados em Databricks, incluindo:
- -Transformações de dados (ETL);
- -Feature Engineering;
- -Verificações de qualidade de dados (Data Quality Checks);
- -Monitorização, agendamento e notificações de pipelines de dados;
- -EDA (Análise Exploratória de Dados);
- -Desenhar e manter pipelines de dados robustos e escaláveis;
- -Trabalhar com grandes volumes de dados, garantindo performance e fiabilidade;
- -Implementar e otimizar processos de ingestão, tratamento e disponibilização de dados;
- -Aplicar as melhores práticas de qualidade e governação de dados;
- -Colaborar com equipas de Analytics e Produto para entregar soluções de dados de alto desempenho.
Valorizamos as tuas soft skills:
- - Integridade e Compaixão;
- - Respeito pelo Indivíduo e pelas Pessoas;
- - Espírito Jovem e Dinâmico;
- - Capacidade de aprendizagem contínua e partilha;
- - Boa comunicação interpessoal e pensamento analítico.
O que temos à tua espera:
- - Integração numa equipa multidisciplinar e inovadora;
- - Ambiente dinâmico, com autonomia e responsabilidade;
- - Oportunidades de progressão profissional num grupo de referência;
- - Projetos com impacto real na transformação digital dos nossos clientes.
Regime de trabalho híbrido.
Skills
Sign in to read and join the discussion.