Ingénieur Data Spark/Scala - Freelance (H/F)
Posted Updated
Summary
Freelance data engineer (daily rate €700) to keep Big Data decisional/datalake applications running and evolving: daily monitoring of Spark/Scala jobs, incident analysis and fixes, data corrections, testing, production deliveries, and documentation.
Taux journalier (TJM): 700
Dans le cadre du renforcement d'une équipe Gestion Courante Décisionnel / Datalake, vous intervenez sur un environnement Big Data permettant de collecter, traiter et valoriser des données issues de différents systèmes métiers.
Votre mission principale consiste à assurer le maintien en conditions opérationnelles (MCO) des applications décisionnelles développées principalement en Spark / Scala, tout en participant à leurs évolutions.
Vos principales responsabilités seront :
*
Assurer le suivi quotidien des traitements Spark / Scala.
*
Analyser et corriger les incidents applicatifs fonctionnels.
*
Réaliser les éventuelles reprises et corrections de données associées aux incidents.
*
Prendre en charge les évolutions applicatives confiées.
*
Réaliser les tests des corrections et développements.
*
Préparer et effectuer les livraisons en production.
*
Rédiger et mettre à jour les spécifications techniques et fonctionnelles.
*
Élaborer les plans et cas de tests.
*
Mettre à jour la documentation et les outils de suivi de l'équipe.
*
Assurer un reporting régulier auprès du chef de projet.
*
Contribuer au maintien de la qualité de service (QOS) sur le périmètre applicatif.
Vous disposez impérativement d'une expérience en gestion courante applicative / MCO, idéalement acquise dans un environnement de production à forts enjeux.
Vous justifiez de plus de 5 ans d'expérience sur les technologies Big Data, avec une expertise significative sur Spark et Scala.
COMPÉTENCES TECHNIQUES
Les compétences recherchées sont les suivantes :
*
Spark : confirmé
*
Scala : confirmé
*
Hive : confirmé
*
HDFS : confirmé
*
Oozie : confirmé
*
Unix / Linux : confirmé
*
Git : confirmé
*
Oracle : confirmé
*
Shell : confirmé
*
Hadoop / YARN
*
Kafka / Spark Streaming
*
Parquet
*
MongoDB
*
JSON / Avro
*
Cloudera
*
Java
Une connaissance de GCP serait un plus.
QUALITÉS PERSONNELLES
*
Rigueur et sens de l'organisation.
*
Bonnes capacités d'analyse et de résolution d'incidents.
*
Autonomie et sens des responsabilités.
*
Bonne communication et capacité à travailler en équipe.
*
Bon relationnel.
*
Excellente qualité rédactionnelle.
*
Capacité à respecter les délais et les engagements de production.
Dans le cadre du renforcement d'une équipe Gestion Courante Décisionnel / Datalake, vous intervenez sur un environnement Big Data permettant de collecter, traiter et valoriser des données issues de différents systèmes métiers.
Votre mission principale consiste à assurer le maintien en conditions opérationnelles (MCO) des applications décisionnelles développées principalement en Spark / Scala, tout en participant à leurs évolutions.
Vos principales responsabilités seront :
*
Assurer le suivi quotidien des traitements Spark / Scala.
*
Analyser et corriger les incidents applicatifs fonctionnels.
*
Réaliser les éventuelles reprises et corrections de données associées aux incidents.
*
Prendre en charge les évolutions applicatives confiées.
*
Réaliser les tests des corrections et développements.
*
Préparer et effectuer les livraisons en production.
*
Rédiger et mettre à jour les spécifications techniques et fonctionnelles.
*
Élaborer les plans et cas de tests.
*
Mettre à jour la documentation et les outils de suivi de l'équipe.
*
Assurer un reporting régulier auprès du chef de projet.
*
Contribuer au maintien de la qualité de service (QOS) sur le périmètre applicatif.
Vous disposez impérativement d'une expérience en gestion courante applicative / MCO, idéalement acquise dans un environnement de production à forts enjeux.
Vous justifiez de plus de 5 ans d'expérience sur les technologies Big Data, avec une expertise significative sur Spark et Scala.
COMPÉTENCES TECHNIQUES
Les compétences recherchées sont les suivantes :
*
Spark : confirmé
*
Scala : confirmé
*
Hive : confirmé
*
HDFS : confirmé
*
Oozie : confirmé
*
Unix / Linux : confirmé
*
Git : confirmé
*
Oracle : confirmé
*
Shell : confirmé
*
Hadoop / YARN
*
Kafka / Spark Streaming
*
Parquet
*
MongoDB
*
JSON / Avro
*
Cloudera
*
Java
Une connaissance de GCP serait un plus.
QUALITÉS PERSONNELLES
*
Rigueur et sens de l'organisation.
*
Bonnes capacités d'analyse et de résolution d'incidents.
*
Autonomie et sens des responsabilités.
*
Bonne communication et capacité à travailler en équipe.
*
Bon relationnel.
*
Excellente qualité rédactionnelle.
*
Capacité à respecter les délais et les engagements de production.