Skip to content
Search jobs inside your AI agent. Claude, ChatGPT, Claude Code, Codex, Gemini, Cursor and Grok
Connect

Signe +

NewBe an early applicant

Data Engineer – Plateforme Data on-premise (F/H).

Posted Updated

Description

Pour un acteur de la fourniture d’énergie, participez à la construction d’une plateforme Data interne, on-premise, reposant sur des outils open source modernes.

Vous concevez, développez, industrialisez et maintenez les composants de cette plateforme. Vous assurez l’acquisition, la transformation, la qualité et la disponibilité des données nécessaires aux usages analytiques, décisionnels et d’intelligence artificielle.

Conception et développement des flux

  • Concevoir les architectures de flux de données.

  • Développer les pipelines d’ingestion.

  • Mettre en œuvre les transformations de données.

Modélisation et valorisation

  • Concevoir les modèles de données analytiques.

  • Garantir la cohérence des indicateurs.

Industrialisation

  • Maintenir les composants techniques de la plateforme.

  • Développer les workflows d’orchestration.

  • Participer aux déploiements CI/CD.

Qualité et gouvernance

  • Mettre en place les contrôles qualité des données.

  • Contribuer au catalogue de données et assurer la traçabilité.

Maintien en conditions opérationnelles

  • Suivre les traitements et analyser les incidents.

  • Contribuer aux évolutions de la plateforme.

  • Documenter les réalisations et transmettre les connaissances.

Environnement technique

  • Développement et requêtage : Python et SQL.

  • Stockage : SeaweedFS, compatible S3.

  • Ingestion : dlt.

  • Transformation : dbt.

  • Orchestration : Apache Airflow.

  • Format de table : DuckLake.

  • Moteur de requête : DuckDB.

  • Catalogue de données : OpenMetadata.

  • Gestion des autorisations : Keycloak.

  • Gestion de versions : GitLab.

  • Visualisation : Power BI.

Vous évoluez dans une communauté technique favorisant l’innovation, le partage entre pairs et le développement des compétences grâce aux formations et certifications

Profil recherché

De formation Bac+5 en informatique, vous disposez de 2 à 10 ans d’expérience en Data Engineering, avec une expérience avérée sur une plateforme Data industrielle en production.

Deux profils sont recherchés, idéalement un profil senior et un profil moins expérimenté.

Compétences indispensables

  • Maîtrise avancée de Python et de SQL.

  • Expérience pratique de dbt.

  • Conception et développement de pipelines de données.

  • Orchestration de traitements, avec Airflow ou un outil équivalent.

  • Maîtrise de Git, des pratiques CI/CD et des API REST.

  • Modélisation décisionnelle, notamment en schéma en étoile.

  • Connaissance des architectures Data Lake / Lakehouse.

  • Expérience d’une plateforme Data industrielle en production.

Compétences appréciées

  • Docker.

  • Power BI.

  • SAP : S/4HANA, CDS View, ODP, Datasphere ou équivalent.

  • Gouvernance et qualité des données.

  • MLOps et industrialisation de modèles de Machine Learning.

Qualités attendues

  • Autonomie et rigueur.

  • Esprit d’équipe.

  • Curiosité et force de proposition.

Skills

Apply

See also

Data Engineering jobs by country — openings, pay and top skills →