Senior Data Engineer
Summary
Senior Data Engineer builds and refactors scalable data pipelines in Python, FastAPI, and PostgreSQL/Oracle, deploys them on Kubernetes with Helm, and ensures high-quality, reusable data products for government use.
Functie
Senior Data Engineer
Als Senior Data Engineer vervul je een sleutelrol in de verdere professionalisering van een nieuwe data-infrastructuur. Je werkt aan het slim verbinden, beheren en ontsluiten van data met aandacht voor kwaliteit, betrouwbaarheid en hergebruik. Je werkzaamheden dragen bij aan duurzame, herbruikbare dataproducten die maatschappelijke waarde creëren.
Belangrijkste technieken, methoden en tools
- Python
- Oracle en/of PostgreSQL
- Mirantis / Kubernetes / Docker
- Helm
- Prefect, Airflow
- FastAPI
Taken en verantwoordelijkheden
- Verder perfectioneren van de nieuwe infrastructuur zodat deze schaalbaar, stabiel en toekomstbestendig is.
- Refactoring van bestaande programmatuur ter verbetering van prestaties en onderhoudbaarheid.
- Ontwikkelen van datapipelines (Python), zelfstandig en in teamverband.
- Bijdragen aan Life Cycle Management (LCM) voor tooling en dataproducten en zorgen dat tooling up-to-date blijft.
- Testen en valideren van datastromen om datakwaliteit te waarborgen; bijdragen aan unit- en integratietesten en testautomatisering.
- Ontwikkelen van API’s voor interne en externe datatoepassingen (bijv. met FastAPI).
- Sparren over ontwerpkeuzes en toekomstbestendige data-oplossingen; uitvoeren van peer reviews en documentatie voor kennisborging.
- Ondersteunen bij bugfixing en incidentoplossing, eventueel in samenwerking met andere teams.
- Deelnemen aan Scrum-sessies en samenwerken met Product Owner en gebruikers aan doordachte oplossingen.
- Kennis delen binnen het team en bijdragen aan het gezamenlijke kennisniveau.
Jouw profiel
- Ervaring met ontwikkelen van datapipelines en werken in moderne data-infrastructuren.
- Analytisch vermogen en een pragmatische instelling bij het oplossen van technische vraagstukken.
- Samenwerkingsgericht; je draagt actief bij aan ontwerpdiscussies, peer reviews en kennisdeling.
- Affiniteit met kwaliteit, betrouwbaarheid en herbruikbaarheid van dataproducten.
Eisen:
- De kandidaat beheerst de Nederlandse taal vloeiend, in woord en geschrift
- Minimaal 6 jaar ervaring Python ETL ontwikkeling
- Minimaal 6 jaar ervaring met PostgreSQL en/of Oracle
- Minimaal 3 jaar ervaring met Kubernetes en Helm
- Minimaal 2 jaar ervaring met datamodellering
- Door de kandidaat zelfgeschreven CV en motivatie
Wensen:
- Een beschrijving van de aanpak voor de uit te voeren opdracht gezien het specifieke vraagstuk van het Kadaster, met nadruk op ervaring met complexe informatiestromen
- Een beschrijving van twee cruciale knelpunten die zich vaak voordoen in dit soort processen of opdrachten en de oplossingen daarvoor
- Ervaring met een recente versie van .NET als pré
Competenties:
- Resultaatgericht
- Helicopterview
- Besluitvaardig
- Vasthoudend
- Kan zijn/haar eigen pad trekken in een complex krachtenveld
- In staat om zelfstandig binnen een organisatie te bewegen
- Omgevingssensitief
- Communicatief zowel schriftelijk als mondeling sterk
- Proactief
- Initiatiefrijk
- Analytisch vermogen