Инженер сопровождения (SDP Hadoop)

SberData - департамент по управлению данными всего Сбербанка. SberData строит централизованное хранилище данных, объем которого уже превышает 100 ПБ. Это продуктово-ориентированная инженерная команда с функциями развития выделенных технологических направлений, отражающих новый подход Сбербанка к данным и к применению AI. SDP Hadoop - это полноценный дистрибутив на базе Apache Hadoop, адаптированный для внутреннего использования, предназначенный для хранения и обработки слабоструктурированных и неструктурированных данных. Первый этап отбора на эту вакансию – общение с AI-рекрутером. После отклика вам на почту придет приглашение пройти первичное интервью с ГигаРекрутером в Telegram. Диалог займёт примерно 10 минут. Его задача — уточнить недостающие детали и ускорить рассмотрение вашей кандидатуры. ГигаРекрутер только начинает свой путь, поэтому просим относиться с пониманием. Ваш опыт и участие помогут сделать его удобным и полезным!### Задачи * обеспечение бесперебойной работы платформы Hadoop в Сбере: установка, настройка, обновление кластеров SDP Hadoop и связанной инфраструктуры * участие в проектировании продукта SDP Hadoop со стороны сопровождения: написание ТЗ, описание и воспроизведение Дефектов * автоматизация рутинных операций для повышения производительности и надежности систем * анализ и оперативное устранение нештатных ситуаций, отказов приложений и исследование корневых причин их возникновения * поддержка и совершенствование процессов CI/CD, релизного процесса, обеспечивая эффективную разработку и доставку * создание эксплуатационной документации для сопровождаемых систем * организация работ, взаимодействие со смежными командами, в части исправления выявленных недостатков * контроль внесения изменений в промышленную среду.* глубокие знания в troubleshooting'е и администрировании linux-систем, уверенное владение командами ОС семейства Linux * понимание работы стека TCP/IP, опыт эксплуатации CI/CD систем: Jenkins/Github/TeamCity/etc * опыт работы с системами мониторинга: Prometheus, Zabbix * понимание технологий интеграции между системами - форматы сообщений xml, json, менеджеры очередей Kafka, RabbitMQ, IBM MQ, ActiveMQ) * опыт автоматизации на скриптовых языках: shell/perl/python/etc * опыт работы с централизованными системами по управлению идентификацией пользователей (RH IDM IPA, Active Directory), понимание принципов работы Kerberos, LDAP * английский язык на уровне чтения технической документации * опыт написания технической документации и технических заданий * знание принципов работы реляционных БД и ITSM, ITIL * высшее образование. Будет плюсом: * опыт в администрировании и troubleshooting'e Hadoop, а именно Hive, YARN, Oozie, Zookeper, Hue, Ambari, HBASE, Spark, HDFS, Druid, Flink, Solr, Ranger * навыки работы с генеративными AI-моделями.### Условия * комфортный современный офис: БЦ Даниловский форт, рядом с М.Тульская, Верхние котлы * **график работы – офис** * ежегодный пересмотр зарплаты, годовая премия * корпоративный спортзал и зоны отдыха * более 400 образовательных программ СберУниверситета для профессионального и карьерного развития * расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа * гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ * подписка Прайм с возможностью совместного использования до трех близких * вознаграждение за рекомендацию друзей в команду Сбера.