Data Engineer | Mid (Remote)
Compass UOL Data Engineer | Mid (Remote)
- Construir e manter pipelines de dados escaláveis e confiáveis;
- Atuar com ingestão, transformação e modelagem de dados;
- Desenvolver soluções utilizando Databricks, Spark e tecnologias de processamento distribuído;
- Implementar e evoluir arquiteturas de Data Lake e Data Lakehouse;
- Garantir qualidade, performance e disponibilidade dos dados;
- Atuar próximo ao negócio, traduzindo requisitos e regras de negócio em soluções de dados.
- Sólidos conhecimentos em SQL e Python;
- Experiência com modelagem de dados, incluindo Fato, Dimensão e Modelagem em Cubo;
- Sólidos conhecimentos em Databricks;
- Experiência com Apache Spark e processamento distribuído;
- Conhecimentos em Airflow, Kafka e dbt;
- Experiência com bancos de dados SQL e NoSQL, como PostgreSQL, MongoDB e Cassandra;
- Conhecimentos em plataformas cloud AWS, GCP;
- Experiência com arquiteturas de Data Lake e Data Lakehouse;
- Capacidade de compreender rapidamente regras de negócio e transformá-las em soluções de dados.