Data Engineer Lakehouse & Cloud Pipelines (Smart Working)
Posted Updated
Description
Gruppo Orsero cerca un Data Engineer per rafforzare il team Data e guidare lo sviluppo della piattaforma dati. Sarai responsabile di pipeline, orchestrazione e qualità dei dati, con partecipazione alle fasi di sviluppo in ambiente aziendale internazionale.
Il candidato ideale ha esperienza su Lakehouse/cloud (Databricks/Synapse/Azure), pipeline, CI/CD e testing dei dati; buona conoscenza di SQL, PySpark e Python e ottima padronanza dell’inglese.
Progettare e sviluppare pipeline per l'acquisizione e integrazione dati dai sistemi sorgente verso la piattaforma dati. Costruire e mantenere tabelle storicizzate e processi di trasformazione (SCD2) e regole di qualità del dato. Gestire orchestrazione e monitoraggio dei flussi di caricamento e ottimizzazione dei costi. Configurare e gestire ambienti di sviluppo, test e produzione con Git, CI/CD e test automatici sui dati. Collaborare con il team Data per definire modello dati e modello semantico di Fruttital. Supportare le società estere del Gruppo nell’implementazione e replica del modello dati sui rispettivi sistemi. Collaborare con partner esterni nei progetti di implementazione e curare la data lineage. Almeno 3 anni di esperienza nel ruolo di Data Engineer. Esperienza su piattaforme cloud e progetti Lakehouse in produzione. Ottima conoscenza di Spark (PySpark), SQL avanzato e Python. Familiarità con Delta Lake e Parquet. Esperienza nella progettazione e gestione di pipeline e orchestrazione (es. Fabric Data Factory), CDC, integrazione di file e API. Conoscenza di Git, processi CI/CD e strumenti di testing dei dati (es. dbt). Ottima conoscenza della lingua inglese. Smart working Ambiente internazionale Orario 9-17 (lun-ven)Skills
Sign in to read and join the discussion.