Data Platform Engineer - GCP, BigQuery & AI-Driven DataOps
Posted Updated
Description
Drd Recruiting cerca un Mid Data Platform Engineer per guidare la progettazione e l’evoluzione di una Data Platform su Google Cloud Platform. Sarai protagonista nello sviluppo di pipeline di ingestione, trasformazione e distribuzione dati con BigQuery e dbt, gestendo infrastrutture via Terraform e orchestrando workflow con Airflow.
La figura interverrà nelle scelte architetturali Data Lakehouse/Data Mesh, Data Governance e Data Lineage, supportando Data Science e MLOps.
Progettazione e sviluppo della Data Platform su Google Cloud Platform, garantendo scalabilità e qualità del dato. Sviluppo di pipeline di ingestione, trasformazione e distribuzione dati con BigQuery/dbt. Gestione infrastruttura cloud tramite Infrastructure as Code (Terraform). Implementazione di workflow di orchestrazione con Airflow/Cloud Composer. Contributo alle architetture Data Lakehouse/Data Mesh e Semantic Layer. Progettazione Data Governance, Data Lineage e catalogazione dati. Sviluppo di automazioni basate su AI/LLM per monitoraggio qualità dati e ottimizzazione processi. Supporto a Data Science/ML in dataset, feature store e MLOps. CI/CD, test automatici e monitoraggio qualità soluzioni. Almeno 4 anni in Data Engineering/Data Platform Engineering. Ottima conoscenza di BigQuery e gestione costi. Esperienza Terraform e IaC in cloud (preferibilmente GCP). Conoscenza di dbt o framework equivalenti per trasformazione dati. Ottima padronanza di Python nel data engineering. Esperienza con Airflow per orchestrazione di pipeline. Hybrid work Google Cloud certs AI tools access