Data Engineer – ELT Migration (SQL, DBT, Airflow) | Hybrid
Summary
Migrate an ETL pipeline to an ELT workflow using dbt and Airflow on PostgreSQL, converting Python/Pandas transformations to SQL and scaling the architecture to ~150 resources.
padoa recherche un Data Engineer orienté data pour conduire la migration ELT d'un pipeline ETL existant vers DBT sur un Data Warehouse PostgreSQL, orchestré par Airflow, architecture validée par un POC et mise en production à grande échelle sur ~150 ressources.
Vos missions quotidiennes: migrer les transformations Python/Pandas vers SQL via DBT, contribuer au nouveau loader pour les insertions batch en base et répliquer l'architecture sur toutes les ressources, en priorisant les cas non