Data Engineer
Summary
Builds and optimizes scalable data pipelines for a Madrid-based bank, using Spark, Scala, Python, Airflow, and cloud migration from Hadoop.
Chez Extia, nous recherchons un·e Data Engineer pour rejoindre un projet stratégique dans le secteur bancaire à Madrid
Ce que nous attendons de vous
- Expérience en tant que Data Engineer (minimum 3 ans) dans des environnements Big Data
- Très bonne maîtrise de Spark avec Scala et Python
- Expérience avec Apache Airflow pour l’orchestration des pipelines
- Solide connaissance de SQL et des bases de données NoSQL
- Expérience avec Hadoop et HDFS
- Expérience avec les outils CI/CD (GitLab, Jenkins ou autres)
- Expérience avec S3 / Cloud Object Storage et formats Parquet ou ORC
- Connaissance du Software Development Lifecycle (SDLC)
- Expérience en environnement Agile
Très apprécié
- Connaissance de Kubernetes et de la containerisation
- Expérience avec Dremio pour la virtualisation des données
- Expérience avec Kafka ou les architectures de streaming
- Expérience avec Elasticsearch et Kibana
- Connaissance de HashiCorp Vault
- Connaissance du secteur bancaire
- Anglais niveau B2
Responsabilités
- Participer à la migration d’infrastructures Hadoop legacy vers des architectures cloud
- Développer et optimiser des pipelines de données robustes et scalables
- Mettre en place des processus de transformation et de qualité des données avec Spark et SQL
- Automatiser les pipelines via Airflow
- Construire et maintenir des pipelines CI/CD pour le déploiement et les tests automatiques
- Réaliser des tests unitaires et des validations de qualité des données
- Optimiser les processus d’ingestion et d’orchestration des données
- Rédiger la documentation technique et opérationnelle
- Collaborer avec les équipes data, business et tech
- Contribuer à une culture d’amélioration continue et d’apprentissage
Pourquoi rejoindre Extia ?
- Flexibilité réelle – modèle adapté à votre équilibre vie pro/perso
- Plan de carrière personnalisé
- Package de benefits compétitif (santé, ticket restaurant, transport…)
- Environnement international (+3000 collaborateurs en Europe)
- Événements, afterworks et communauté active
Intéressé·e ou connaissez-vous quelqu’un qui correspond ?
Si vous êtes passionné·e par le Data Engineering, le Big Data et le Cloud…