Data Engineer
Posted 2
views
Summary
Data Engineer who sets up a new on-premise data platform: building and maintaining ETL/ELT pipelines with dbt, applying Data Vault 2.0 modeling on containerized PostgreSQL platforms, automating workflows via CI/CD (Git, Airflow), and helping migrate legacy systems to modern data architectures.
Functie
Als Data Engineer ondersteun je de inrichting van het nieuwe On Premise Dataplatform. Je ontwerpt, bouwt en onderhoudt schaalbare dataplatformen, past Data Vault-modellering toe en automatiseert en optimaliseert data-pipelines met DBT zodat analisten en data scientists efficiënt kunnen werken met hoogwaardige data.
Taken
- Ontwikkelen en onderhouden van ETL/ELT-pipelines met behulp van DBT voor datatransformatie, -validatie en -documentatie.
- Toepassen van Data Vault 2.0-principes voor het modelleren van geïntegreerde datamodellen.
- Werken met dataplatformen op basis van containers en PostgresSQL.
- Samenwerken met stakeholders om data-behoeften te vertalen naar technische oplossingen.
- Automatiseren van processen met CI/CD-pipelines (GIT, Airflow).
- Ondersteunen bij het migreren van legacy-systemen naar moderne data-architecturen.
Vereisten
- Ervaring met Data Build Tool (DBT) voor data transformatie.
- In het bezit van een Data Vault Modeling certificaat (Deze dient op aanvraag aantoonbaar te zijn!)
Eisen
- Ervaring met Data Build Tool (DBT) voor data transformatie
- In het bezit van een Data Vault Modeling certificaat (Deze dient op aanvraag aantoonbaar te zijn!)
Gunningscriteria
- Ervaring met het automatiseren van processen met CI/CD-pipelines (bijvoorbeeld GIT, Airflow).
- Ervaring met programmeertalen (bijvoorbeeld SQL, Python).
- Ervaring met databaseomgevingen (PostgreSQL/Microsoft SQL Server/Oracle SQL Developer).
- Kandidaat begrijpt de opdracht en past binnen de organisatie.
- Ervaring met het automatiseren van processen met CI/CD-pipelines (bijvoorbeeld GIT, Airflow etc.)
- Ervaring met programmeertalen (bijvoorbeeld SQL, Python etc.)
- Ervaring met database omgevingen (Postgre
- SQL/Microsoft SQL Server/Oracle SQL Developer)
- Kandidaat begrijpt de opdracht en past binnen de organisatie
- Competenties
- Analytisch vermogen en probleemoplossend denken
- Communicatief vaardig (contact met stakeholders en kennisoverdracht)
- Proactief en resultaatgericht, met oog voor detail