Data Engineer Overheid

Data Engineer Overheid Den Haag €4.850 - €7.250 36 Uren Locatie : Den Haag Salaris : €4.850 - €7.250 Uren : Fulltime Leer de organisatie kennen Werken aan een gezonder Nederland, met data als stevig fundament: dat kan bij onze opdrachtgever. Dit is een ministerie in Den Haag dat zich inzet voor goede en betaalbare zorg, gezondheid en welzijn. Het werk is maatschappelijk betekenisvol, wat zorgt voor een prettige sfeer en veel vrijheid in je werk. De organisatie vindt het belangrijk dat iedereen gezien, gehoord en gewaardeerd wordt, en dat je jezelf kunt zijn en je mening durft te geven. Binnen de afdeling Informatievoorziening is een centrale, veilige en kostenefficiënte dataomgeving opgezet waar data-initiatieven uit het hele departement samenkomen. Doordat meerdere directies er gebruik van maken, ontstaan volop kansen voor samenwerking en kennisdeling. Over de functie Als Data Engineer word je onderdeel van een klein, hecht datateam met een architect, een Product Owner en een externe beheerpartij. Je bent de verbindende schakel tussen ruwe data en bruikbare inzichten voor uiteenlopende domeinen, zoals HR, subsidies, inkoop en financiën. Je werkt nauw samen met directies, data scientists en het externe ontwikkelteam, en speelt een sleutelrol in de verdere ontwikkeling van de dataomgeving. Jouw verantwoordelijkheden zijn: - Bouwen en onderhouden van datapijplijnen in Databricks met Python en SQL; - Migreren van bestaande dataoplossingen uit ADF, SQL en een oudere Databricks-omgeving naar een nieuwe hub-spoke Databricks-omgeving; - Ontwikkelen van generieke pijplijnen, API's en een datacatalogus; - Adviseren over en bouwen aan een incrementele aanpak in plaats van full-load batchprocessen; - Reviewen en verbeteren van code van anderen om de kwaliteit te waarborgen; - Zorgen dat data betrouwbaar, AVG-proof en conform overheidsstandaarden zoals NORA, DGB en BIO beschikbaar komt; - Meedenken over de overgang...