Data Engineer
Posted 2
views
Summary
Data Engineer at Reale ITES (Gruppo Reale Mutua, insurance) building and maintaining ETL data flows and analytical assets on serverless cloud, using Python, SparkSQL, Azure DataFactory and Lambda architecture, plus API integration and data QA. Hybrid role based in Torino or Milano with ~12 smart-working days per month; RAL from €39,000.
Reale ITES, nata l’1 gennaio 2015, rappresenta per il Gruppo Reale Mutua la prima esperienza di realtà transnazionale e ha l’obiettivo di essere un centro di competenza specializzato nei servizi IT, come è sintetizzato nell’acronimo ITES che corrisponde a Information Technology Engineering Services.
Un’azienda nata all’interno di una realtà consolidata che ha alle spalle una lunga storia e davanti un percorso impegnativo. Una realtà che nasce dall’idea di mettere insieme uomini e donne di Italia e Spagna per creare una piattaforma unica informatica e sfruttare tutte quelle sinergie che sono necessarie per un gruppo, come il Gruppo Reale Mutua. Nella realtà lavorativa l’IT è diventata per tutte le aziende un fattore di forte competitività e la missione di Reale ITES è quella di riuscire a migliorare i processi informativi, fornire possibilità operative semplici e veloci, aumentare l’efficienza e l’efficacia dei processi, allo scopo di dare al cliente finale un prodotto eccellente e al Gruppo un elemento competitivo in più. Per rappresentare questa realtà è stato creato inizialmente un GEIE (Gruppo Europeo di Interesse Economico) con una sede primaria a Torino e una sede secondaria a Madrid con circa 450 dipendenti, 330 dislocati presso le sedi di Torino e 120 a Madrid. Objective- Works with data analysts and data architect in order to collaborate in creation, optimization, scaling data products and analytical assets; as well as maintain and improve the analytical platform.
- Implement and maintain key data flows in serverless frameworks.
- ETL logic in frameworks such as DataFactory and SparkSQL.
- Adaptors between systems in frameworks such as Lambda architecture.
- API logic in frameworks such as Lambda architecture.
- Write and maintain SparkSQL and Python data querying, aggregation and filtering code in SQL and Python.
- Contribute to data schema structure and ensure adherence.
- QA data as it comes into and out of our systems.
- Excellent knowledge of serverless cloud architecture principles.
- 2 + year experience writing test-drive Python in an agile environment.
- 2 + year experience implementing ETL flows using both file and API sources.
- Experience in work development under agile methodology
- Experience with complex SQL SELECT queries, including sub-queries, case statements and UNION.
- Experience implementing REST APIs.
- Knowledge of data structuring and schema best practices and standards.
- Experience with data science techniques in Python or R.
- Experience with development tools like DevOps.
- Experience with visualization tools like PowerBI.
- Familiarity with other visualization tools like SAP Business Object, Qlik, Tableau, IBM Cognos
- Solid SQL database skills necessary to query and analyze data.