Data-инженер
Summary
Builds and optimizes data pipelines, ETL processes, and analytical data stores using Python, Spark, ClickHouse, and PostgreSQL for a large retail-tech company.
Задачи
- Разработка архитектурных компонентов аналитического хранилища данных.
- Разработка программного кода новых и доработка существующих компонентов аналитического хранилища данных.
- Разработка правил и практик работы с кодом, описание их в базе знаний.
- Разработка ETL-процессов.
- Написание кастомных трансформов, автоматизация процесса разработки.
- Оптимизация запросов и структур баз данных.
- Нормализация и обогащение данных через Spark или Python.
- Создание аналитических витрин в ClickHouse.
- Оперативное реагирование на информацию о проблемах в зоне ответственности, выполнение задач в установленный срок.
- Обучение новых сотрудников и развитие компетенций команды.
Требования
- Высшее (желательно профильное — техническое/экономическое/в направлениях информатики и автоматизированных систем/в сфере ИТ), дополнительное обучение и сертификационные курсы по предметной области приветствуются.
- Опыт разработки промышленных решений.
- Опыт работы с ETL-процессами.
- Опыт работы с системами контроля версий (git, Gitlab, Bitbucket).
- Опыт работы с распределёнными базами данных — Hadoop, Greenplum.
- Знание SQL (ANSI, PL/SQL), опыт оптимизации запросов.
- Опыт работы с ClickHouse, PostgreSQL, Ceph S3, OpenSearch, Trino.
- Навыки работы с инструментами: Python Pandas, PySpark.
- Опыт работы с GitLab CI Pipelin: versioning, CI для data jobs, automated tests, публикация артефактов.
Условия и бенефиты
- График работы: 5/2, с 9:00 до 18:15 (в пятницу — до 17:00).
- Удаленный формат работы в рамках РФ.
- Возможность обучаться и сертифицироваться за счёт компании: внешние тренинги и семинары по профессиональным тематикам, отраслевые конференции, программа развития управленческих навыков, очные мастер-классы, платформы онлайн-образования и многое другое.
- Развитая система компенсаций и льгот.
- Широкий пакет ДМС (включая выезд за рубеж и стоматологию).
- Страхование жизни и здоровья.
- Скидки в магазинах сети Х5 («Пятёрочка», «Перекрёсток» и т.д.).
- Программа привилегий Prime-zone (скидки на товары и услуги и специальные предложения от компаний-партнёров).
- Материальная помощь сотрудникам, попавшим в сложную жизненную ситуацию.
- Оформление по ТК РФ с официальной заработной платой.