Senior Big Data Infrastructure Engineer
Summary
A senior engineer owns and evolves the Big Data platform infrastructure (Hadoop/HDFS, self-managed S3-compatible storage like Ozone/MinIO, Apache Iceberg) for the international segment of a travel-tech company's booking platforms — a modern, no-legacy stack where they can shape architecture during a pilot shift to many small tables/files and per-business-unit quotas.
#data
Senior Big Data Infrastructure Engineer / ETG
Remote
📍 Важно: вакансия международная, кандидатов смотрим ВНЕ РФ и Беларуси.
Emerging Travel Group (ETG) — это международная тревел-технологическая компания (travel-tech), которая создает и развивает платформы для онлайн-бронирования отелей и организации путешествий.
Это команда Big Data Platform внутри большой инфраструктурной команды. Мы ищем сеньора, который возьмёт на себя Big Data инфраструктуру международного контура. Здесь не нужно поддерживать legacy: в выборе технологий ориентируемся на рынок, всё устаревшее активно выпиливаем, а вся инфраструктура работает на самых свежих версиях.
Сейчас в международном контуре идёт пилот, который сильно меняет то, как используется платформа. Раньше это было небольшое количество очень крупных датасетов, а станет тысячи небольших таблиц и огромное количество мелких файлов в Ozone S3. Параллельно переходим от «общего котла» ресурсов к квотам для каждого бизнес-юнита. Задач много, и во многих из них можно реально повлиять на архитектуру.
Что важно:
- Опыт проектирования, внедрения и эксплуатации Big Data платформы от 5 лет
- Практический опыт с HDFS / Hadoop: деплой, апгрейды, траблшутинг
- Опыт самостоятельного деплоя и эксплуатации S3-хранилища. В идеале Ozone, но MinIO и аналоги тоже подойдут
- Опыт работы с Apache Iceberg
- Английский на уровне чтения технической документации
- Возможность работать по московскому времени (разница до 3 часов)
Будет большим плюсом:
- Опыт с Trino, Kafka или Flink
- Опыт с REST-каталогами для Iceberg (Lakekeeper, Gravitino, Polaris и др.)
- Опыт работы с AI-инструментами не только на уровне чата: Copilot, агенты, автоматизация своих задач
Читать подробнее:
→ Откликнуться тут