Data Engineer GCP Big Query Dataflow F/H
Summary
This Data Engineer role involves designing and deploying data architectures on GCP to integrate financial services into mobile applications. The position focuses on building ETL pipelines using Python, Airflow, and BigQuery, while managing infrastructure as code with Terraform.
Descriptif du poste
Vous interviendrez dans le cadre d'un programme visant à intégrer les services financiers dans deux applications mobiles.
Vos missions consisteront à contribuer :
- Intégrer les données de contrats: exposition via des API, Connexion au SI,
- Assurer une expérience utilisateur des écrans, selfcare client,
- Personnaliser le moteur de recommandation, exploitation des données,
- Accompagner dans l'architecture cible, la qualité de la donnée,
- Conception et déploiement de l'architecture fonctionnelle et applicative sur GCP
- Automatisation du provisionnement des ressources GCP avec Terraform (IaC)
- Développement de pipelines ETL avec Python / Airflow pour le traitement séquentiel des données
- Intégration et modélisation des données dans BigQuery avec dbt (Data Build Tool) pour industrialiser les transformations SQL
- Stockage et gestion des données brutes sur Cloud Storage
- Connexion et préparation des données via DataPrep et suivi de la qualité des données (monitoring)
- Mise à disposition des jeux de données nettoyés aux équipes métiers
- Visualisation des indicateurs clés via Data Studio / Power BI
Profil recherché
Pour mener à bien ce projet, vous devrez justifier de :
- Compétences techniques: Cloud GCP, ( Cloud Storage, Cloud Functions, DataPrep, Cloud Composer, Big Query, DataFlow, Pub/Sub, DBT, Terraform.), Looker, SQL, Python
- Compétences en Data Engineer orienté Cloud
- Bonne capacité relationnelle et rédactionnelle
- Rigueur, force de proposition,
- Bon niveau d'anglais écrit oral
Type de contrat CDI
Contrat travail Salaire
- 47 - 57 k€ brut annuel
Expérience
- 7 An(s) Cette expérience est indispensable
Informations complémentaires
- Secteur d'activité : Conseil en systèmes et logiciels informatiques
Employeur
Créée en 1999, CATAMANIA fait partie des ESN les plus compétitives dans les régions où elle est implantée et se spécialise sur des projets d envergure orientés métiers : Grande Distribution, Banque, Assurance et Protection sociale mais aussi Energie, Industrie, Secteur Public.
En 2022 CATAMANIA c est : 84 millions d de chiffre d affaires, 1100 collaborateurs répartis sur 15 agences en France et 4 agences à l international : Rabat, Luxembourg, Genève et Montréal.
Aujourd'hui, l objectif est d