Engenheiro de Dados - DATAHUB
No Close-up nós trabalhamos com dados, informações e tecnologia para ajudar a transformar a área da saúde!
Somos uma empresa de conteúdo e serviços para a indústria farmacêutica e, contribuímos para o conhecimento das tendências do mercado, ajudando com eficiência e transparência a estreitar as relações entre laboratórios e profissionais médicos.
Estamos em busca de um ENGENHEIRO DE DADOS - DATAHUB para nos apoiar!
- Construir, manter e evoluir pipelines de ingestão e transformação de dados no Snowflake.
- Integrar dados provenientes de múltiplas fontes, como:
- sistemas de CRM e ERP;
- APIs;
- planilhas e arquivos;
- serviços de armazenamento;
- bancos de dados e sistemas locais;
- processos de web scraping.
- Estruturar, manter e evoluir as camadas de dados:
- RAW: armazenamento dos dados brutos, conforme recebidos das fontes de origem;
- TRUSTED: dados tratados, padronizados, validados e submetidos a regras de qualidade;
- CURATED: dados organizados, enriquecidos e disponibilizados para consumo analítico, integrações e aplicações.
- Implementar mecanismos de governança, qualidade, segurança e rastreabilidade dos dados.
- Monitorar os processos de carga, identificando falhas, gargalos e oportunidades de otimização.
- Atuar na padronização e integração de dados entre os diferentes países da América Latina.
- Documentar pipelines, regras de transformação, integrações e modelos de dados.
- Apoiar a evolução da arquitetura de dados e das iniciativas de inteligência artificial do DataHub.
Requisitos técnicos obrigatórios
- Experiência com Snowflake, incluindo:
- modelagem de dados;
- ingestão e transformação de dados;
- otimização de consultas;
- monitoramento e otimização de custos.
- Experiência com Azure Data Factory.
- Conhecimento avançado em SQL.
- Experiência com processos de ETL e ELT.
- Experiência com integração de múltiplas fontes e formatos de dados.
- Experiência com desenvolvimento em Python.
- Conhecimento de práticas de DevOps e implementação de pipelines de CI/CD.
- Experiência com monitoramento, tratamento de erros e observabilidade de pipelines de dados.
Conhecimentos desejáveis
- Conhecimento do Snowflake Cortex e da preparação de agentes de inteligência artificial no ambiente Snowflake.
- Conhecimento de modelos de inteligência artificial, Machine Learning e Large Language Models.
- Experiência com soluções de web scraping e tratamento de alterações nas estruturas das fontes de dados.
- Conhecimento de segurança, controle de acesso e governança de dados no Snowflake.
Benefícios que fazem o seu dia a dia ser ainda melhor
- 💙 Assistência Médica
Com coparticipação e parceria Welhub, garantindo cuidado completo para você e seus dependentes. Saúde e tranquilidade caminhando juntas.
- 😁 Assistência Odontológica
Sorriso bonito e sem surpresas: sem coparticipação para o colaborador!
- 💳 Cartão Benefícios Flex
Nosso cartão é 100% flexível: use como vale-alimentação ou vale-refeição, do seu jeito, de acordo com a sua rotina.
- 💊 Desconto Farmácia
Acesso a condições especiais e descontos em medicamentos para manter a saúde em dia.
- 🛡 Seguro de Vida
Proteção e segurança para você e sua família.
- 🎂 Day Off de Aniversário
O dia é seu — e o presente também! Tire seu merecido descanso no seu aniversário.
- 🎓 Parcerias Educacionais
Faculdades, Idiomas, TI e Dados. Aprender sempre faz parte do nosso pacote!
- 👶🏽 Auxílio Creche para filhos até 1 ano a contar da licença maternidade para as mamães;