Data Engineer-E Spark / Dbt / Aws
Posted Updated
Description
InFreelancing recherche un Ingénieur Data pour concevoir, développer et optimiser des pipelines de données, en utilisant Spark/PySpark, Python et SQL, dans une architecture Lakehouse avec Apache Iceberg et dbt.
Vous orchestrerez les traitements avec Airflow, déployerez et maintiendrez les solutions sur AWS, et contribuerez à l'Infrastructure as Code avec Terraform, afin d'exposer des données fiables et performantes pour les métiers et les analyses.
Concevoir, développer et optimiser des pipelines de données Développer et industrialiser les traitements en Spark/PySpark, Python, SQL et dbt Exploiter des données au format Apache Iceberg dans une architecture Lakehouse / Medallion (couches bronze, silver, gold) Orchestrer les traitements avec Airflow Déployer et maintenir les traitements sur AWS Contribuer à l'Infrastructure as Code avec TerraformSkills
Sign in to read and join the discussion.