Engenheiro de Dados

Requisitos obrigatórios:

• Graduação Completa;
• Análise e Modelagem de Arquitetura de Dados;
• Desenvolvimento de rotinas com linguagem SQL (DDL, DML, TCL);
• Implementação de notebooks em Python/PySpark;
• Elaboração de comandos em Spark SQL (Query interativas e streaming) e PySpark;
• Implementação de Data Warehouse;
• Modelagem de dados multidimensional;
• Experiência em ambientes na nuvem;
• Implementação e manutenção de fluxos ETL (extração, transformação, carga) / ELT.
• Desenvolvimento de código com padrões de CI/CD (integração e entrega/implantação contínuas)
• Desenvolvimento com utilização de ferramentas de versionamento de código e com esteira de devops.

Responsabilidades e atribuições:

O profissional deve estar acostumado a conduzir reuniões com clientes, liderar o levantamento das informações e criação de arquiteturas robustas de dados utilizando modelagem multidimensional.

Será de sua responsabilidade a concepção e o desenvolvimento dos artefatos que farão o fluxo de dados "fim-a-fim", desde a sua origem ainda na conectividade com o sistema origem até o destino nas tabelas fatos e dimensões, garantindo qualidade nos dados, robustez e recuperação de falhas.

Profissional deve colaborar ativamente com as demais equipes e garantir interoperabilidade dos artefatos desenvolvidos com a utilização de ferramentas de suporte ao versionamento de código.

Deve ter comprovado conhecimento no desenvolvimento de soluções de grandes volumes de dados (bigdata) utilizando as principais linguagens de programação para este fim como Python, Pyspark e SQL.