Data Engineer в Такси
Summary
Data engineer for WB Taxi builds and evolves the service's data platform: designing data storage models, developing and maintaining ETL/ELT pipelines, migrating existing pipelines to the new platform, and setting up monitoring, logging and alerts. Core stack: Python, SQL, ClickHouse, Apache Airflow; 2+ years of data engineering experience required.
Объединённая компания Wildberries и Russ — это международная технологическая компания, образованная в результате слияния двух лидеров рынка — IT-компании Wildberries и оператора наружной рекламы Russ.
WB Такси развивает экосистему сервисов для клиентов, водителей и операторов поддержки. Мы уже запустили сервис в Беларуси и масштабируемся на рынок РФ и страны СНГ.
Вам предстоит:
- Проектировать и развивать data-платформу: разрабатывать модели хранения данных и пайплайны обработки данных;
- разрабатывать и поддерживать ETL/ELT-пайплайны для обработки данных из различных источников;
- участвовать в миграции существующих пайплайнов и витрин на новую data-платформу;
- развивать наблюдаемость платформы: настраивать мониторинг, логирование и алерты;
- оптимизировать производительность запросов и эффективность хранения данных;
- обеспечивать качество данных.
- Имеете опыт работы дата-инженером от 2 лет;
- проектировали отказоустойчивые пайплайны обработки данных, понимаете принципы построения DWH, инкрементальных загрузок и контроля качества данных;
- знаете на уверенном уровне Python и SQL, умеете писать поддерживаемый и читаемый продакшн код;
- имеете опыт работы с ClickHouse или другими аналитическими СУБД;
- имеете опыт работы с Apache Airflow или другим оркестратором.