Senior BigData Devops (Hadoop)

Open 43d
Объединённая компания Wildberries и Russ — это международная технологическая компания, образованная в результате слияния двух лидеров рынка — IT-компании Wildberries и оператора наружной рекламы Russ. Платформа данных - ведет разработку инфраструктуры вокруг всех данных нашего маркетплейса. Здесь проходит путь от рождения данных до их хранения: агенты, фреймворки, предобработки, миграции. Проект является центральной дата структурой компании.

Администрировать и развивать Hadoop-кластеры объемом 7.5PB NVME (Vanilla HDFS, YARN, Iceberg, Spark, Trino);

Обеспечивать отказоустойчивость и доступность сервисов

Проводить мониторинг, алертинг и анализ инцидентов;

Оптимизировать производительность кластера и сервисов;

Автоматизировать рутинные операции (Ansible, скрипты);

Вести документацию (runbooks, инструкции).

Имеете опыт администрирования Linux (systemd, сети, диски, RAID/LVM);

Работаете с Hadoop (HDFS, YARN, Iceberg, Spark);

Понимаете HA (Active/Standby);

Имеете опыт настройки Kerberos и TLS;

Имеете навыки диагностики (top, iostat, vmstat, tcpdump, flamegraph);

Работаете с мониторингом (Prometheus/Grafana или аналоги).

Обучение и развитие: языковые клубы, собственный корпоративный университет, программы развития управленческих навыков и многое другое;

Благополучие сотрудников: корпоративный пакет ДМС со стоматологией, корпоративный спорт, консультации психолога и дополнительные возможности аккредитованной IT-компании;

Множество сообществ: клуб спикеров, футбола, йоги, шахмат и т.д.;

Забота о семьях: создаем условия, в которых легко сочетать карьеру и заботу о близких – от гибкого подхода до масштабных проектов для детей сотрудников;

Скидки и партнерские программы: на обучение, страхование, покупки и многое другое;

Комфортная рабочая среда: бесплатное питание в офисе, современные офисы рядом с метро, корпоративная техника и портал для сотрудников.