DevOps Azure Databricks - Expert Migration Dataiku - Freelance (H/F)
Posted Updated
Description
Taux journalier (TJM): 600€CONTEXTEMission a pourvoir pour un grand compte dans le secteur de la logistique : DevOps Azure Databricks - Expert Migration Dataiku , 3 à 4 jours de télétravail par semaine.MISSIONS, RÔLES ET RESPONSABILITÉS * Assurer le suivi du cycle de vie des composants Data et Big Data, de la mise à jour à l'exploitation. * Réaliser les upgrades et migrations des plateformes, notamment dans le cadre d'une migration Dataiku vers Azure Databricks. * Intégrer les évolutions Microsoft Azure et Azure Databricks, et contribuer à l'évolution de l'architecture du Socle Data Cloud Azure. * Déployer et administrer les environnements Azure Databricks, en garantissant leur disponibilité et leur bon fonctionnement. * Maintenir les connexions entre les plateformes On-Premise (Dataiku, Dremio, Tableau, Cloudera/Hadoop) et Azure Databricks. * Développer et maintenir des infrastructures automatisées via Terraform, Ansible et Azure DevOps. * Industrialiser les déploiements et mettre en place des pipelines CI/CD pour fiabiliser et accélérer les mises en production. * Automatiser les tâches d'exploitation en Python et Bash, avec un focus sur la répétabilité et la réduction des interventions manuelles. * Mettre en œuvre les mécanismes de sécurité Azure (Entra ID, Key Vault, gestion des accès) et assurer la conformité aux standards de sécurité et de gouvernance. * Mettre en place la supervision et l'observabilité (Grafana, Prometheus, ELK/OpenSearch) et contribuer à l'optimisation des performances. * Prendre en charge le support N3, diagnostiquer les incidents complexes et piloter leur résolution. * Produire la documentation technique ainsi que les bonnes pratiques d'exploitation et de gouvernance.COMPÉTENCES REQUISES * Maîtrise de Microsoft Azure, avec une capacité à intégrer les évolutions de la plateforme dans un socle Data Cloud. * Expertise Azure Databricks pour le déploiement, l'administration et l'exploitation des environnements. * Très bonne pratique de Terraform pour l'Infrastructure as Code et l'automatisation des déploiements. * Expérience d'Azure DevOps pour industrialiser les livraisons et automatiser les workflows. * Solides compétences en scripting Python pour l'automatisation des opérations et l'outillage. * Solides compétences en Bash pour l'automatisation et l'exploitation système. * Mise en œuvre d'Entra ID pour l'authentification, l'identification et la gestion des accès. * Utilisation d'Azure Key Vault pour la gestion sécurisée des secrets, certificats et clés.PROFIL RECHERCHÉ * Sensibilité aux enjeux de gouvernance des données et à la mise en conformité avec des standards de sécurité. * Expérience appréciée sur Ansible pour renforcer l'automatisation et la configuration des environnements. * Familiarité avec les pratiques CI/CD appliquées aux déploiements d'infrastructure et de plateformes data. * À l'aise avec le support N3, l'analyse de causes racines et l'optimisation des performances. * Connaissance de Grafana et, plus largement, des sujets de supervision/observabilité pour le suivi en production. * Capacité à formaliser et partager une documentation technique et des bonnes pratiques d'exploitation.
Skills
Sign in to read and join the discussion.