Data Engineer Python / Airflow – Lyon
Summary
Onyx-Conseil is hiring a Data Engineer in Lyon to join a team working in the energy sector: taking over and improving existing data flows, migrating them to Apache Airflow, and refactoring processing in Python, with a focus on monitoring, reliability, logging/retries, and Agile collaboration.
Nous recherchons un Data Engineer pour rejoindre une équipe intervenant dans le secteur de l’énergie.
Vos missionsReprendre, analyser et améliorer des flux Data existants.
Améliorer la supervision, la fiabilité et le monitoring des pipelines.
Challenger les solutions existantes et proposer des axes d'amélioration.
Participer à la migration progressive des flux vers Apache Airflow.
Développer et refondre certains traitements en Python.
Mettre en place une gestion robuste des logs, erreurs et retries.
Participer au MCO et à la résolution des incidents.
Contribuer à l'automatisation et à l'industrialisation des pipelines.
Collaborer avec les équipes techniques et métier dans un fonctionnement Agile.