Data Engineer
Summary
Data Engineer for GGD Rotterdam-Rijnmond (public health service, hired via BlueTrail): building reliable data structures, pipelines, and the data warehouse, while developing and managing the Azure and Databricks platform on which the organization's data and AI applications run, taking them from proof of concept to production-ready.
Waar ben jij van?
Jij bent van data die klopt, beschikbaar is en optimaal kan worden benut. Van het bouwen en verbeteren van betrouwbare datastructuren en datastromen waarmee de GGD Rotterdam-Rijnmond haar informatievoorziening verder kan ontwikkelen.
Je zorgt ervoor dat data op een gestructureerde, veilige en efficiënte manier wordt ontsloten, verwerkt en beschikbaar gesteld. Je denkt mee over datamodellen, datawarehousing, datakwaliteit en de verdere ontwikkeling van onze dataomgeving. Daarbij kijk je niet alleen naar wat technisch mogelijk is, maar ook naar wat de organisatie nodig heeft. Daarnaast ontwikkel en beheer je het Azure- en Databricks-platform waaróp onze data en (AI-)toepassingen draaien, en zorg je dat wat we bouwen ook daadwerkelijk productie-ready wordt.
Je bent nieuwsgierig naar nieuwe technieken en mogelijkheden en ziet waar processen slimmer of beter kunnen. Problemen in de dataomgeving pak je proactief op en waar nodig breng je de juiste collega's en expertise bij elkaar. Je werkt nauw samen met andere data- en IV-professionals en zoekt actief de verbinding met de verschillende onderdelen van de GGD en de gemeente Rotterdam.
Zo draag jij bij aan een betrouwbare en toekomstbestendige dataomgeving en help je de GGD om steeds meer data- en kennisgedreven te werken.
Jouw functie
Als Data Engineer maak je onderdeel uit van het Data & IV-team van de GGD Rotterdam-Rijnmond. Binnen dit team werk je aan het ontwikkelen, beheren en verder professionaliseren van de dataomgeving en zorg je ervoor dat data betrouwbaar, veilig en efficiënt beschikbaar is voor verschillende toepassingen binnen de organisatie.
Je houdt je bezig met het ontwikkelen en optimaliseren van datastructuren, datastromen en datapipelines en draagt bij aan de verdere ontwikkeling van het datawarehouse en de bijbehorende data- en BI-oplossingen. Je bewaakt de kwaliteit en consistentie van data en houdt daarbij rekening met geldende eisen rondom privacy en security. Een belangrijk deel van je werk bestaat uit het ontwikkelen en beheren van ons Azure- en Databricks-platform en het productie-ready maken van de (AI-)toepassingen die we hierop bouwen: van proof of concept naar een beheerde, geautomatiseerde en monitorbare productieomgeving.
Daarnaast denk je actief mee over datamodellering, datawarehousing, datastrategie en datagovernance. Je signaleert mogelijkheden om de dataomgeving en bestaande processen verder te verbeteren en vertaalt deze naar concrete technische oplossingen. Problemen en knelpunten in de dataomgeving analyseer je en pak je proactief op.
Je werkt nauw samen met andere data- en IV-professionals en stemt af met collega's en stakeholders binnen de GGD Rotterdam-Rijnmond en de gemeente Rotterdam. Vanuit jouw technische expertise draag je bij aan de ontwikkeling en het beheer van dataproducten die de organisatie ondersteunen bij data- en informatiegestuurd werken.
Werkzaamheden
- Ontwikkelen, beheren en optimaliseren van datastructuren, datastromen en datapipelines;
- Ontsluiten, transformeren en verwerken van data uit verschillende databronnen ten behoeve van dataproducten, rapportages en analyses;
- Ontwikkelen en onderhouden van geautomatiseerde datastromen en bijdragen aan de verdere automatisering van de dataomgeving;
- Bijdragen aan de ontwikkeling, inrichting en verdere professionalisering van het datawarehouse en de bijbehorende data-infrastructuur;
- Ontwikkelen, beheren en optimaliseren van datamodellen en datastructuren;
- Bewaken en verbeteren van de kwaliteit, consistentie en betrouwbaarheid van data;
- Signaleren, analyseren en oplossen van technische knelpunten binnen de dataomgeving;
- Bijdragen aan de inrichting en verdere ontwikkeling van de cloudgebaseerde dataomgeving;
- Ontwikkelen, inrichten en beheren van het Azure- en Databricks-platform, inclusief toegangs- en rechtenbeheer, infrastructuurautomatisering en kostenbeheersing;
- Productie-ready maken en houden van data- en AI-toepassingen: geautomatiseerd uitrollen (CI/CD), testen, logging, monitoring en foutafhandeling;
- Samen met collega’s uit het team (AI-)toepassingen van proof of concept naar beheerde productie brengen en het beheer daarvan borgen;
- Vastleggen en toepassen van gezamenlijke standaarden en werkwijzen voor ontwikkeling en beheer, zoals versiebeheer, code review en documentatie;
- Rekening houden met geldende kaders en afspraken rondom privacy, informatiebeveiliging en datagovernance bij het ontwikkelen en beheren van dataoplossingen;
- Adviseren over technische mogelijkheden en verbeteringen binnen de dataomgeving en deze vertalen naar concrete oplossingen;
- Signaleren en onderzoeken van nieuwe technische mogelijkheden en bijdragen aan innovatie en doorontwikkeling van de dataomgeving;
- Samenwerken en kennis delen met data- en IV-professionals en afstemmen met stakeholders binnen de GGD Rotterdam-Rijnmond en de gemeente Rotterdam;
- Bijdragen aan de verdere ontwikkeling van data- en informatiegestuurd werken binnen de GGD Rotterdam-Rijnmond.