Senior Data Engineer

Fulltime Senior Data Engineer in Amsterdam YoungCapital Beschrijving Word Fulltime Senior Data Engineer in Amsterdam en werk aan het Grundlig platform met Python, SQL, BigQuery en Databricks. Wat ga je doen? Als Senior Data Engineer kom je te werken op het Grundlig platform. Dit centrale data-product harmoniseert en consolideert alle verkoop-, betalings-, order- en cadeaukaarttransacties vanuit meerdere bronsystemen, van de eerste betaling tot aan de uiteindelijke orderlevering. Het platform is opgebouwd volgens Data Mesh principes met domain-driven ownership en federated governance. Via BigQuery en Databricks levert dit platform betrouwbare data uit voor de organisatie. Jouw verantwoordelijkheden In deze functie ben je verantwoordelijk voor het ontwerpen, bouwen, testen en onderhouden van schaalbare batch-, streaming- en near-real-time datapijplijnen. Je investeert in en harmoniseert transactiedata vanuit diverse bronnen naar herbruikbare productiedatamodellen met behulp van Python, SQL, BigQuery en dbt. Daarbij pas je jouw kennis van Databricks en Spark toe voor schaalbare dataverwerking, streaming, datalakehouse-architectuur en governance via Unity Catalog. Ook bouw je datakwaliteitscontroles, monitoring, alerting, error handling en dead-letter queues. Jouw impact en taken Je draagt tevens zorg voor het waarborgen van databeveiliging, toegangsbeheer, data lineage en PII-bescherming binnen de systemen. In jouw rol mentor je daarnaast collega's, voer je code reviews uit en bouw je actief mee aan CI/CD-pipelines en data-architectuurbesluiten. Wat betreft extra wensen en pre's is ervaring met Google Cloud Platform (GCP), dbt, Apache Beam, Terraform, GitHub Actions, financiële of retail-transactiedata en Data Mesh een waardevolle toevoeging. Wat wij bieden - Aantrekkelijk marktconform salaris tot € 6.000,- bruto per maand , passend bij senioriteit en ervaring. - Volledige IT-uitrusting inclusief high-end werklaptop en benodig...