Data Engineer: Spark, Airflow & Lakehouse in AWS
Posted Updated 5
views
Description
Et teknologifirma i København søger en Data Engineer til at hjælpe med at bygge og vedligeholde infrastrukturen for deres datapipeline. Du vil skrive produktionsklare ETL-kode og sikre dataenes kvalitet. Stillingen kræver erfaring i Data Engineering med færdigheder i Python og SQL, samt erfaring med værktøjer som Apache Spark og Airflow. Der tilbydes et dynamisk arbejdsmiljø med fokus på samarbejde og vækst.
Design, byg og vedligehold skalerbare datapipelines ved hjælp af PySpark og Apache Airflow.
Bidrag aktivt til administrationen af vores data lakehouse ved hjælp af Apache Iceberg på Amazon S3.
Implementere automatiseret test og overvågning for at sikre pålidelighed af data.
Solid erfaring i Data Engineering, i stand til at tage en funktion fra koncept til produktion.
Stærke kodningsevner i Python og SQL.
Erfaring med Apache Spark (PySpark) og workflow orchestration tools som Airflow.
Skills
Sign in to read and join the discussion.