Senior Data Engineer H/F
Summary
Okara, a consulting firm, is hiring a Senior Data Engineer to work within a global retail giant's data platform team (squad Compute) in Lille or Paris. Day to day: drive major migrations (AWS Glue Catalog to Databricks Unity Catalog, MWAA to Astronomer), optimize PySpark on Databricks, and coach teams on data engineering best practices.
Détail du poste
Okara cherche un·e Senior Data Engineer
L'enjeu : Garantir la robustesse, l'évolution et l'adoption de la plateforme Data au coeur de l'écosystème d'un géant mondial du retail.
En tant que consultant·e Okara, tu rejoins l'équipe Managed Tools au sein de la Data Factory de notre client. Ton terrain de jeu ? La squad Compute, responsable de fournir la stack Data (calcul, orchestration, exposition), d'en assurer la scalabilité à l'échelle globale et d'acculturer des centaines d'utilisateurs aux meilleures pratiques.
Ton rôle
Tu n'es pas seulement là pour faire tourner de la tuyauterie : tu es à la fois l'architecte du moteur Data et l'évangéliste qui accompagne les équipes dans leur montée en puissance.
Concrètement, tu vas :
- Piloter les Migrations Majeures : Relever des défis d'architecture critiques, notamment la migration d'AWS Glue Catalog vers Databricks Unity Catalog et de MWAA vers Astronomer (Airflow).
- Master la Performance Compute : Optimiser les traitements PySpark sur Databricks, monitorer la plateforme et agir de manière proactive pour garantir une stabilité à toute épreuve.
- Propager les Bonnes Pratiques : Définir les standards de Data Engineering (Spark, Databricks, orchestration) et former/accompagner les équipes métiers sur la plateforme.
- Construire la Stack de Demain : Expérimenter de nouvelles fonctionnalités/outils et travailler sur les enjeux clés d'accessibilité et de gouvernance de la donnée.
Le profil recherché
Expertise Databricks & PySpark : Tu as une expérience avancée et éprouvée sur Databricks (idéalement avec Unity Catalog) et tu maîtrises l'optimisation Spark à grande échelle.
Orchestration & Cloud : Tu es très à l'aise avec Airflow (Astronomer), l'écosystème AWS (Glue, MWAA) et la Modern Data Stack.
Mindset Platform & Enablement : Tu aimes faire monter les autres en compétences. Tu sais vulgariser des sujets complexes d'infrastructure et fédérer autour des bonnes pratiques software/data.
Proactivité & Rigueur : Tu sais anticiper les goulots d'étranglement et garantir le maintien en condition opérationnelle d'une plateforme stratégique.
Mais aussi...
Le terrain de jeuÉchelle Massive : Ta plateforme héberge et orchestre les use cases Data de milliers d'utilisateurs et de dizaines d'équipes.Stack de Pointe : Databricks (Unity Catalog), PySpark, Astronomer (Airflow), AWS.Localisation Flexible : Poste basé à Lille ou Paris.Mindset Okara : Autonomie, partage de connaissances, excellence technique et impact direct sur la transformation Data du retail.Prêt·e à bâtir et opérer le moteur Data de demain ? Rejoins l'aventure Okara.
Expertise Databricks & PySpark : Tu as une expérience avancée et éprouvée sur Databricks (idéalement avec Unity Catalog) et tu maîtrises l'optimisation Spark à grande échelle.
Orchestration & Cloud : Tu es très à l'aise avec Airflow (Astronomer), l'écosystème AWS (Glue, MWAA) et la Modern Data Stack.
Mindset Platform & Enablement : Tu aimes faire monter les autres en compétences. Tu sais vulgariser des sujets complexes d'infrastructure et fédérer autour des bonnes pratiques software/data.
Proactivité & Rigueur : Tu sais anticiper les goulots d'étranglement et garantir le maintien en condition opérationnelle d'une plateforme stratégique.