Data Engineer: Hadoop & PySpark for Datalake Ops
Summary
Consultant data engineer in Paris working on the evolution of a client's datalake — ingesting, preparing, and transforming data in a Scrum setting alongside production and DevOps teams. Core stack: Hadoop, Python/PySpark, Hive, SQL, Git, Jenkins, Jira, plus Unix/Linux shell scripting and English for liaising with a team in Porto.
Free-Work recherche un consultant DSI pour intervenir sur les évolutions du datalake et collaborer avec l’équipe production applicative et DevOps. Vous travaillerez dans un cadre Scrum et contribuerez à l’ingestion, à la préparation et à la transformation des données.
Vous maîtrisez Hadoop, Python/PySpark et Hive, ainsi que SQL, GIT, Jenkins et Jira. Une expérience Unix/Linux et du shell scripting est indispensable, ainsi que de bonnes connaissances de l’anglais pour les échanges avec Porto.