POT9291 - Un Senior Data Engineer sur Vélizy (IT) / Freelance

Almatek recherche pour l'un de ses clients Un Senior Data Engineer sur Vélizy.

Contexte de la mission

Dans le cadre du développement de ses capacités data, le client souhaite renforcer son équipe Data Engineering afin de :

• Construire et industrialiser des pipelines de données
• Structurer des architectures Data Lake / Data Warehouse modernes
• Améliorer la qualité, la performance et la scalabilité de la plateforme data
• Accompagner les équipes métiers dans l’exploitation des données

Le consultant interviendra en collaboration étroite avec les équipes produit, plateforme et métiers réparties à l’international.

Environnement Fonctionnel & Technique

• ETL / ELT : Talend, SSIS, Azure Data Factory
• Base de données : SQL Server (Database Engine, SSIS, SSAS)
• Data Platform : Data Lake, Data Warehouse, Data Marts
• Outils : Power BI (PBIRS), dbt
• Technologies complémentaires : Trino, MinIO (ou équivalent)
• Cloud (nice to have) : GCP (BigQuery, GCS, Dataproc)
• CI/CD : Azure DevOps, GitLab
• Architecture : Medallion architecture

Missions principales

Data Engineering

• Concevoir, développer et maintenir des pipelines ETL/ELT
• Implémenter des mécanismes de chargement (full / delta / historique)
• Optimiser les performances des traitements et requêtes SQL
• Assurer la qualité et la fiabilité des données

Data Architecture

• Concevoir des Data Lakes, Data Warehouses et Data Marts
• Modéliser des jeux de données complexes répondant aux besoins métiers
• Participer à la mise en place d’architectures modernes (medallion, distributed query)

Data Integration

• Intégrer des données via API, fichiers et autres mécanismes d’ingestion
• Assurer l’interopérabilité avec les systèmes sources

Collaboration & Agile

• Travailler avec Product Owners, équipes techniques et métiers
• Participer au cadrage des besoins (data discovery, data scoping)
• Appliquer les méthodologies Agile

Industrialisation & CI/CD

• Mettre en place des pipelines CI/CD pour les déploiements
• Maintenir des standards de qualité (tests, documentation, versioning)

Livrables

• Composants data développés et déployés (code source)
• Documentation technique et fonctionnelle
• Modèles de données documentés
• Rapports d’audit et de contrôle qualité
• Rapports de tests et validation
• Transfert de compétences et support

Compétences requises

Techniques

• Très bonne maîtrise SQL (optimisation, tuning)
• Expertise Microsoft Data Stack (SSIS, SSAS, SQL Server)
• Expérience en ETL/ELT et modélisation data
• Bonne connaissance des architectures Data modernes
• Expérience avec dbt
• Connaissance des moteurs distribués (Trino ou équivalent)
• CI/CD (Azure DevOps ou GitLab)