Data Engineer Senior – Python / AWS / IA / Secteur Energie (H/F) (IT) / Freelance
Octopus Group Data Engineer Senior – Python / AWS / IA / Secteur Energie (H/F) (IT) / Freelance
Summary
Senior freelance Data Engineer joining a squad dedicated to energy performance within a Data Mesh platform: building robust Python/AWS data pipelines, FastAPI services and Redshift data models with dbt and Airflow, plus monitoring, Run support and productionizing AI/ML solutions.
Nous recherchons un Data Engineer Senior pour renforcer une squad dédiée à la performance énergétique, au sein d'une plateforme Data organisée en Data Mesh.
Vous interviendrez sur des sujets à forte dominante Data Engineering, développement Python, Cloud AWS et industrialisation de solutions Data & IA, avec un rôle à la fois opérationnel et de référent technique.
Vos missions :
Concevoir et développer des pipelines de données robustes, industrialisés et maintenables.
Développer des API et services Python, notamment avec FastAPI.
Concevoir et faire évoluer des solutions sur AWS : Glue, Lambda, SQS, SNS, Redshift, API Gateway…
Concevoir et optimiser les traitements SQL et les modèles de données sur Redshift.
Participer à la mise en œuvre et à l'évolution des modèles de données avec dbt.
Concevoir et maintenir les orchestrations avec Airflow.
Mettre en place les tests automatisés, le monitoring, l'alerting et la supervision.
Contribuer à la construction et à l'évolution de Data Products dans un environnement Data Mesh.
Participer à des cas d'usage Data Science, Machine Learning et IA appliquée.
Contribuer à l'industrialisation et à la mise en production de modèles et solutions IA.
Prendre en charge le Run, analyser les incidents et garantir la fiabilité des produits de données.
Participer aux choix techniques, benchmarks, POC et spikes.
Travailler en proximité avec les Data Analysts, Analytics Engineers, Data Scientists, Architectes et Product Owners.