Data Engineer AWS

Data Engineer AWS

Somos una consultoría mexicana especializada en la promoción y venta de soluciones de datos, analítica avanzada e inteligencia artificial. Trabajamos con tecnologías líderes del mercado como Snowflake, Qlik y otras plataformas de clase mundial, ayudando a empresas a transformar sus datos en decisiones estratégicas.

Actualmente buscamos un Data Engineer AWS (Por proyecto inicial 3 meses) para diseñar, construir y mantener pipelines de datos escalables, robustos y eficientes, utilizando servicios de AWS y/o la plataforma Talend, así como herramientas de orquestación y procesamiento actuales como Airflow, dbt, Spark y Kafka.

?

Requisitos

Experiencia indispensable en SQL, Python y diseño, desarrollo y operación de arquitecturas de datos en AWS.

Dominio práctico de servicios AWS orientados a datos, especialmente S3, Glue, Redshift, Lambda y Step Functions. Se valorará experiencia con Kinesis, RDS, DynamoDB, Lake Formation, CloudWatch e infraestructura como código.

Experiencia en diseño e implementación de procesos ETL/ELT, pipelines de datos batch y streaming, Data Lake y/o Data Warehouse, modelado dimensional, particionamiento y optimización de consultas en Redshift, PostgreSQL, Snowflake, BigQuery o tecnologías similares.

Conocimiento de Apache Airflow para orquestación de flujos, SQL y dbt para transformación/modelado de datos, Apache Spark/PySpark o Scala para procesamiento distribuido, y Kafka/MSK/Confluent para streaming.

Se valorará experiencia en Talend Data Fabric, Talend Cloud o Talend Studio como conocimiento complementario para integración de datos. La experiencia únicamente en dashboards, RPA, desarrollo backend, infraestructura cloud, soporte o certificaciones AWS no sustituye la experiencia en construcción de pipelines y arquitectura de datos.

Competencias

• Pensamiento analítico.
• Resolución de problemas.
• Comunicación efectiva.
• Trabajo colaborativo.
• Orientación a la calidad y mejora continua.

Experiencia

3 años en adelante en Ingeniería de Datos.

Experiencia comprobable diseñando, desarrollando y manteniendo pipelines de datos productivos de punta a punta: ingesta, transformación, almacenamiento, consumo, monitoreo y soporte operativo.

Experiencia integrando datos desde bases de datos, APIs REST, archivos planos, sistemas legacy y eventos/streaming, desarrollo de scripts y automatización utilizando Python.

Principales responsabilidade

• Diseñar e implementar pipelines ETL/ELT desde cero en AWS, utilizando Glue, Lambda, Step Functions, S3, Redshift y otros servicios según la necesidad de la solución.
• Desplegar y mantener flujos de datos batch y streaming mediante Apache Airflow, dbt Core/Cloud, Spark (EMR o Databricks) y Kafka (MSK o Confluent).
• Definir e implementar mecanismos de calidad de datos, idempotencia, reintentos, reprocesamiento y recuperación ante fallos.
• Diseñar modelos analíticos y estructuras de datos para Data Lake y Data Warehouse, aplicando modelado dimensional, particionamiento y prácticas de optimización.
• Integrar fuentes heterogéneas: bases de datos relacionales, APIs REST, sistemas legacy, archivos planos y fuentes streaming.
• Implementar catálogo, linaje, seguridad y políticas de acceso mediante AWS Lake Formation, Glue Data Catalog u herramientas equivalentes.
• Monitorear costos, rendimiento, disponibilidad y uso de recursos mediante CloudWatch, Prometheus/Grafana u herramientas equivalentes.
• Definir pruebas de datos mediante Great Expectations, dbt tests u otras herramientas, así como alertas y controles de calidad.
• Documentar pipelines, dependencias, flujos de datos, SLAs, runbooks y decisiones de arquitectura.

Requisitos:

• Escolaridad: Licenciatura o Ingeniería (en áreas relacionadas en tecnologías de la información)
• Inglés: avanzado
• Disponibilidad inmediata

¿Qué ofrecemos?

• Sueldo 100% nomina
• Sueldo competitivo de acuerdo a experiencia
• Prestaciones de ley
• Seguro de gastos médicos mayores
• Vales de despensa
• Licencia en Coursera para que sigas desarrollándote
• Acceso a plataformas como MINU y TotalPass
• Constante capacitación comercial, técnica y de fabricantes.

Ubicación: Av. Ejército Nacional Mexicano 216-Piso 4, Anzures, Miguel Hidalgo, 11590 Ciudad de México, CDMX

"No discriminamos por el color, raza, religión, género, ideología, preferencia sexual, estado civil, nacionalidad, incapacidad, edad o cualquier forma ilegal"