Data Engineer
Summary
Builds and scales a modern data platform from scratch using ClickHouse, Python, and Kafka to power a large retail chain’s analytics and operations.
SMALL — крупный ритейлер повседневных товаров и готовой еды в Казахстане.
В нашей сети сегодня:
- более 160 магазинов;
- тысячи сотрудников;
- миллионы клиентов;
- собственное производство готовой еды.
Чем предстоит заниматься:
- Участвовать в проектировании и создании масштабируемой платформы данных с нуля.
- Разрабатывать надежное и высокопроизводительное хранилище данных на базе ClickHouse.
- Строить гибкие и отказоустойчивые ETL/ELT пайплайны.
- Выстраивать процессы Data Quality и обеспечивать Data Observability.
- Активно развивать и внедрять DataOps-подходы.
- Проводить менторство, код-ревью, участвовать в техническом развитии команды.
- Сотрудничать с системными аналитиками, разработчиками, DevOps-инженерами, принимая участие в архитектурных решениях.
Что мы ожидаем:
- 5+ лет опыта в области Data Engineering.
- Экспертиза в ClickHouse (глубокое понимание архитектуры, шардинг, репликация и оптимизация).
- Отличное знание SQL, Python, опыт написания production-ready кода.
- Практический опыт работы с dbt, Kafka, Kafka Connect, Debezium.
- Уверенные навыки работы с Airflow или аналогами.
- Опыт работы с CI/CD.
- Знание и практическое применение принципов Data Observability.
- Понимание DataOps-процессов.
- Понимание методологий проектирования хранилищ данных.
- Отличные навыки коммуникации и умение работать в команде.
- Будет плюсом опыт работы с Docker, Kubernetes.
Что мы предлагаем:
- Гибкий формат работы: удаленно или в современном офисе в Алматы.
- Работа с современным стеком и возможность внедрять лучшие практики.
- Работа с миллионной аудиторией пользователей и большим разнообразием данных.
- Возможность внедрять лучшие индустриальные практики и видеть реальный результат своей работы.