Data Engineer Jr_Hibrido CDMX
Summary
Junior data engineer (hybrid, Mexico City) who helps design, develop, test, and deploy components of end-to-end data pipelines. Core stack is Python, PySpark, SQL, and GCP (BigQuery, Composer/Airflow, Dataproc), with intermediate Databricks, Linux shell, Azure, and Git work.
Descripción de puesto:
2+ años de experiencia práctica comprobable en Data Engineering, participando en el diseño, desarrollo, implementación y soporte de pipelines de datos end-to-end.
Habilidades técnicas:
Conocimientos deseados
- Desarrollo de pipelines de datos (extracción, ingesta y transformación).
- Python.
- Pyspark.
- Google Cloud Platform (GCP):
- BigQuery
- Cloud Composer (Airflow)
- Cloud Storage Buckets
- Cloud Logging
- Dataproc
Conocimientos intermedios
- SQL.
- Linux Shell Scripting.
- Databricks:
- Notebooks
- Workflows / Jobs
- Delta Lake
- Unity Catalog
- Control de versiones:
- GitHub
- Bitbucket
- Azure:
- Virtual Machines
- Microsoft Fabric
Actividades principales:
- Apoyo en el diseño
- Tareas de Desarrollo
- Apoyo en pruebas y puesta de componentes en ambientes bajos