Senior Data Engineer
Description
Por que ser Zappter?
- Aqui você tem a oportunidade de colaborar em projetos que ajudam nossos clientes a superar desafios de negócios utilizando soluções tecnológicas.
- Nossa cultura é 100% remota, e você pode trabalhar de qualquer lugar. Não é atoa que já estamos presentes em 18 estados do Brasil! 🏠
- Trabalhará ao lado de pessoas que são apaixonadas pelo que fazem, tendo a chance de aprender diariamente e ampliar seus conhecimentos.
- Além disso, nós Zappters cuidamos para crescer, conquistamos resultados com qualidade, inspiramos protagonistas e semeamos transformação. Somos presença que representa porque nossa harmonia vem de todas as vozes. Nossa cultura é nossa marca no mundo, é forte e autêntica🙂
Gostou? Então, junte-se a nós! 🩵
Sobre o projeto:
Estamos em busca de uma pessoa Engenheira de Dados Sênior para atuar em um projeto estratégico de transformação digital, contribuindo para a evolução de uma plataforma corporativa de dados em ambiente Google Cloud.
Buscamos alguém com sólida experiência em engenharia de dados, perfil hands-on, autonomia técnica e interesse em desenvolver soluções escaláveis, seguras e eficientes.
Como será seu dia a dia?
- Desenvolver, manter e evoluir pipelines de dados utilizando tecnologias do Google Cloud Platform (GCP).
- Construir e otimizar processos de ETL/ELT, garantindo eficiência, escalabilidade e confiabilidade.
- Desenvolver soluções de processamento de dados em batch e streaming.
- Trabalhar com BigQuery, realizando modelagem, transformação e otimização de consultas SQL.
- Integrar dados provenientes de diferentes sistemas corporativos, APIs e fontes externas.
- Atuar na orquestração e automação de pipelines de dados.
- Implementar boas práticas de qualidade, governança, segurança e observabilidade de dados.
- Monitorar pipelines em produção, identificando falhas e propondo melhorias de performance e custos.
- Colaborar com equipes técnicas e áreas de negócio para disponibilizar dados confiáveis para análises, indicadores e aplicações.
- O que você precisa ter?
- Conhecimento prático em Apache Spark e Spark Streaming.
- Experiência com Databricks.
- Conhecimento em processamento de dados em tempo real (Real-Time Processing).
- Experiência com pipelines de dados e integração entre sistemas.
- Conhecimento em Kafka ou tecnologias de mensageria e streaming.
- Familiaridade com bancos de dados NoSQL, especialmente MongoDB.
- Conhecimento em processos de replicação de dados.
- Vivência com sustentação de aplicações e resolução de incidentes em produção.
- Conhecimentos em arquitetura de dados, alta disponibilidade e processamento distribuído.
- Experiência ou familiaridade com desenvolvimento de sistemas.
Além disso, se tiver os itens abaixo, será ainda melhor!
- Experiência sólida em Engenharia de Dados, preferencialmente de 5 anos ou mais.
- Domínio de Python e SQL para desenvolvimento e transformação de dados.
- Experiência prática com Google Cloud Platform (GCP).
- Conhecimento sólido em BigQuery, incluindo modelagem de dados e otimização de consultas.
- Experiência no desenvolvimento e sustentação de pipelines ETL/ELT em ambientes produtivos.
- Conhecimento em arquiteturas de dados e processamento de grandes volumes de informações.
- Experiência com integração de dados provenientes de diferentes fontes.
- Conhecimento em qualidade, monitoramento e tratamento de falhas em pipelines.
- Capacidade de atuar com autonomia, analisar problemas e propor soluções técnicas.
O que vamos te oferecer para que realize um trabalho incrível?
- Experiência com Google Dataflow e Apache Beam.
- Conhecimento em Cloud Composer (Apache Airflow), Cloud Storage e Pub/Sub.
- Experiência com Dataproc e processamento distribuído.
- Vivência com infraestrutura como código utilizando Terraform.
- Conhecimento em CI/CD, GitHub Actions, Cloud Build e Docker.
- Experiência com integração de sistemas SAP/HANA ao ambiente Google Cloud.
- Conhecimento em Cloud Functions e integração com APIs.
- Experiência com web scraping e automação de coleta de dados.
- Conhecimento em governança de dados, catálogo, linhagem e controle de acesso.
- Experiência na disponibilização de dados para ferramentas de BI, como Power BI, e soluções de Inteligência Artificial.
Para apoiar seu dia a dia:
- Atuação remote first, nossa tribo trabalha de qualquer lugar no Brasil.
- Voucher para Happy Hour & Fun com o time para celebrar as conquistas!
- Prêmio para indicações assertivas de novos Zappters.
Para desenvolver sua carreira:
- A cada 6 meses de empresa, você ganha um auxílio no valor de R$300 para investir na sua educação. Além de ter descontos incríveis na mensalidade de vários cursos (afinal, os Zappters adoram aprender!)🎓;
- Bônus "meu mimo" para deixar o momento da alteração salarial mais memorável! Você receberá um bônus (na mesma semana) no valor do seu aumento para comprar um presente especial para você, afinal você merece!
Também é legal você saber que...
Um dos nossos 7 valores é o “Sawabona", seu significado é pra lá de especial, e praticado diariamente aqui na Zappts! 🥰
A saudação #Sawabona se originou no Sul da África, onde se acredita que todos nascemos pessoas boas, mas que, às vezes, podemos cometer alguns erros. Segundo a cultura deste lugar, quando alguém comete erros, toda a população se junta e, durante dois dias, só falam sobre as coisas boas que aquela pessoa já fez. Ao final desse período, todo o povo cumprimenta seu conterrâneo com a expressão "Sawabona". Esse, por sua vez, responde "#Shikoba". 🌍
Sendo assim, Sawabona significa: "Eu te vejo, eu te respeito, você é importante para mim". E a resposta, Shikoba: "Então eu sou bom e existo para você". 🙏
Aqui na Zappts, Sawabona traduz e representa o que mais prezamos em nossas relações: o respeito e a valorização do outro.
Se você é uma pessoa apaixonada por tecnologia e sentiu conexão com os nossos valores, venha para nossa tribo aqui é seu lugar!🌈
