Data Engineer
Posted Updated
Summary
Data Engineer at the Dutch government's shared ICT service center (SSC-ICT), helping set up a new on-premise data platform. Day to day: build and maintain ETL/ELT pipelines with DBT, apply Data Vault 2.0 modeling, work with containerized PostgreSQL platforms, and automate via CI/CD (Git, Airflow).
Functie
Als Data Engineer ondersteun je de inrichting van het nieuwe On Premise Dataplatform. Je ontwerpt, bouwt en onderhoudt schaalbare dataplatformen, past Data Vault-modellering toe en automatiseert en optimaliseert data-pipelines met DBT zodat analisten en data scientists efficiënt kunnen werken met hoogwaardige data.
Taken
- Ontwikkelen en onderhouden van ETL/ELT-pipelines met behulp van DBT voor datatransformatie, -validatie en -documentatie.
- Toepassen van Data Vault 2.0-principes voor het modelleren van geïntegreerde datamodellen.
- Werken met dataplatformen op basis van containers en PostgresSQL.
- Samenwerken met stakeholders om data-behoeften te vertalen naar technische oplossingen.
- Automatiseren van processen met CI/CD-pipelines (GIT, Airflow).
- Ondersteunen bij het migreren van legacy-systemen naar moderne data-architecturen.
Vereisten
- Ervaring met Data Build Tool (DBT) voor data transformatie.
- In het bezit van een Data Vault Modeling certificaat (Deze dient op aanvraag aantoonbaar te zijn!)
Eisen
- Ervaring met Data Build Tool (DBT) voor data transformatie
- In het bezit van een Data Vault Modeling certificaat (Deze dient op aanvraag aantoonbaar te zijn!)
Gunningscriteria
- Ervaring met het automatiseren van processen met CI/CD-pipelines (bijvoorbeeld GIT, Airflow).
- Ervaring met programmeertalen (bijvoorbeeld SQL, Python).
- Ervaring met databaseomgevingen (PostgreSQL/Microsoft SQL Server/Oracle SQL Developer).
- Kandidaat begrijpt de opdracht en past binnen de organisatie.
- Ervaring met het automatiseren van processen met CI/CD-pipelines (bijvoorbeeld GIT, Airflow etc.)
- Ervaring met programmeertalen (bijvoorbeeld SQL, Python etc.)
- Ervaring met database omgevingen (Postgre
- SQL/Microsoft SQL Server/Oracle SQL Developer)
- Kandidaat begrijpt de opdracht en past binnen de organisatie
- Competenties
- Analytisch vermogen en probleemoplossend denken
- Communicatief vaardig (contact met stakeholders en kennisoverdracht)
- Proactief en resultaatgericht, met oog voor detail