Head of DWH
Posted Updated 3
views
Description
Немного о нас: ggsel – маркетплейс цифровых товаров, с 2017 года мы в топе площадок СНГ. Более 6 миллионов пользователей ежемесячно выбирают нас за лучшие цены и качественную поддержку, а за последний год мы выросли в 4 раза. И наша цель – не просто удержать позиции, а перевернуть рынок цифровой торговли: сделать его честным, удобным, быстрым и выйти в лидеры цифровой коммерции, в том числе на международном рынке.
Сейчас продукт находится на этапе серьезной трансформации, и мы собираем сильную инженерную команду. У нас уже работают ребята из Додо, Яндекс.Маркета, Самоката и Авито.
Мы ищем Head of DWH для формирования стратегии развития и управления процессами работы с данными.
Стек: ClickHouse, SQL, Python, Airflow, dbt, PostgreSQL, Docker, Git.
Основные задачи
-
Стратегия и развитие DWH
-
Формирование и защита стратегии развития хранилища данных на 1–3 года: масштабирование, миграции, внедрение новых технологий.
-
Определение архитектурных стандартов и референсных решений для команды инженеров данных.
-
Принятие решений о выборе технологий и оценка рисков с прицелом на рост объёмов данных.
-
Управление командой
-
Найм, постановка задач, контроль сроков и качества, проведение performance review.
-
Построение процессов разработки: code review, стандарты, документация, knowledge sharing.
-
Развитие культуры данных внутри команды и компании.
-
Взаимодействие с бизнесом
-
Сбор и приоритизация требований от бизнес-заказчиков, аналитики, Data Science.
-
Согласование data contracts между командами-источниками и потребителями данных.
-
Презентация roadmap и результатов руководству, защита бюджета и инициатив.
Требования
-
Глубокое знание ClickHouse
-
Проектирование схем: Экспертиза на уровне архитектора — выбор семейства движков MergeTree, ключей партиционирования и сортировки, управление TTL для оптимального сжатия и скорости чтения.
-
Оптимизация запросов: Умение читать планы запросов, оптимизировать потребление памяти, настраивать материализованные представления и проекции.
-
Администрирование: Планирование кластера, настройка шардирования и репликации, мониторинг слияний, управление ресурсами и стоимостью хранения.
-
Резервное копирование: Организация бэкапов в S3 и проверка процедур восстановления (backup/restore, disaster recovery).
-
Инструменты ETL/ELT и Оркестрация
-
Оркестрация: Управление сбором данных через Apache Airflow (DAG, сенсоры, ретраи, backfill).
-
Трансформация: Опыт работы с dbt для построения слоев данных (staging, marts, intermediate).
-
Data Quality: Построение фреймворка тестирования, мониторинга свежести данных и аномалий, data contracts.
-
Языки и Инфраструктура
-
Python: Разработка ETL-скриптов, работа с Pandas, интеграция с API.
-
SQL: Владение на уровне эксперта (аналитические запросы, оптимизация).
-
Инфраструктура: Docker, Git, CI/CD, IaC (Terraform/Ansible), мониторинг (Prometheus, Grafana).
-
Управленческие компетенции
-
Управление командой: Найм, онбординг, развитие, performance review, карьерные треки инженеров.
-
Планирование: Roadmap DWH, приоритизация бэклога, OKR команды, бюджетирование инфраструктуры.
-
Стейкхолдер-менеджмент: Коммуникация с C-level, продуктом, аналитикой, безопасностью.
-
Data Governance: Каталог данных, lineage, ownership, compliance (GDPR/152-ФЗ), разграничение доступа.
5. Дополнительно:
-
Опыт работы с Yandex Cloud
- Опыт развертывания корпоративных ML/LLM
Условия
-
Удаленная работа из любой точки мира.
-
Конкурентная зарплата + performance премия 2 раза в год.
-
Гибкий график и фокус на результат.
-
Оплата обучения, курсов и конференций.
-
Возможность реально влиять на продукт и команду.