Data Engineer/Такси
Summary
Data engineer for WB Taxi (Wildberries' ride-hailing service) who designs and builds the data platform: developing data storage models and ETL/ELT pipelines, migrating pipelines to the new platform, and improving monitoring and query performance. Core stack: Python, SQL, ClickHouse, Apache Airflow.
Проектировать и развивать data-платформу: разрабатывать модели хранения данных и пайплайны обработки данных;
Разрабатывать и поддерживать ETL/ELT-пайплайны для обработки данных из различных источников;
Участвовать в миграции существующих пайплайнов и витрин на новую data-платформу;
Развивать наблюдаемость платформы: настраивать мониторинг, логирование и алерты;
Оптимизировать производительность запросов и эффективность хранения данных;
Обеспечивать качество данных.
Опыт работы дата-инженером от 2 лет;
Опыт проектирование отказоустойчивых пайплайнов обработки данных, понимание принципов построения DWH, инкрементальных загрузок и контроля качества данных;
Уверенное знание Python и SQL, умение писать поддерживаемый и читаемый продакшн код;
Опыт работы с ClickHouse или другими аналитическими СУБД;
Опыт работы с Apache Airflow или другим оркестратором.
Обучение и развитие: языковые клубы, собственный корпоративный университет, программы развития управленческих навыков и многое другое;
Благополучие сотрудников: корпоративный пакет ДМС со стоматологией, корпоративный спорт, консультации психолога и дополнительные возможности аккредитованной IT-компании;
Множество сообществ: клуб спикеров, футбола, йоги, шахмат и т.д.;
Забота о семьях: создаем условия, в которых легко сочетать карьеру и заботу о близких – от гибкого подхода до масштабных проектов для детей сотрудников;
Скидки и партнерские программы: на обучение, страхование, покупки и многое другое;
Комфортная рабочая среда: бесплатное питание в офисе, современные офисы рядом с метро, корпоративная техника и портал для сотрудников.