Data Engineer
Summary
Nine-month fully remote freelance Data Engineer role building and maintaining batch and streaming pipelines, dbt transformations, and data models on a software company's data platform. Core stack: SQL, an orchestrator (Airflow/Dagster/Prefect), dbt, and Git, with cloud/Spark/Kafka as pluses.
Cerchiamo un Data Engineer freelance per nove mesi, interamente da remoto, su una piattaforma dati di un'azienda che sviluppa software.
Attività previste
- Costruire e mantenere le pipeline che portano i dati dalle sorgenti al magazzino, in batch e dove serve in streaming
- Scrivere le trasformazioni e tenerle leggibili, versionate e testate
- Modellare i dati perché chi fa analisi li trovi già pronti, non da ricostruire
- Orchestrare i flussi e sapere subito quando uno si rompe
- Presidiare qualità e affidabilità: test, controlli, documentazione di che cosa significa ogni campo
- Lavorare accanto ad analisti e team di prodotto sulle richieste che arrivano
Conoscenze richieste
- Almeno 3 anni come data engineer, o su ruoli di analytics engineering e integrazione dati
- SQL solido, quello vero: finestre, performance, lettura di un piano di esecuzione
- Uno strumento di orchestrazione: Airflow, Dagster o Prefect
- dbt, o un altro strumento di trasformazione versionata
- Git e flussi di lavoro basati su Git
- Inglese sufficiente a leggere documentazione
Costituiranno un titolo preferenziale conoscenze di:
Kafka o altro streaming Spark data quality (Great Expectations, Soda) modellazione dimensionale o Data Vault CI/CD sulle pipeline Terraform cloud Azure, AWS o GCP
Il processo di selezione
Il processo di selezione prevede di rispondere solo alle candidature compatibili, di solito entro 48 ore dall'invio. Dopodiché si svolgerà un colloquio conoscitivo e successivamente potranno esserci uno o due colloqui di approfondimento tecnico.