Data Engineer (Риски розничного бизнеса)

Ищем специалиста на позицию Data Engineer для участия в создании и поддержке инфраструктуры данных крупного банка. Будете отвечать за разработку, оптимизацию и поддержку витрин данных, работу с источниками данных и создание эффективных процессов обработки больших объемов информации.* анализировать источники и метаданные хранилищ Hadoop и Greenplum для формирования витрин данных * реализовывать и сопровождать витрины данных с использованием технологий Spark/Hadoop и Greenplum * создавать и поддерживать ETL-процессы загрузки данных из внутренних и внешних систем, разрабатывая инкрементальные сценарии * организовывать проверку качества данных и метрик (целостность, полнота, отсутствие дублей) * проводить оптимизацию SQL-запросов и Spark-процессов, выбирая наиболее эффективные способы соединения таблиц и схемы хранения данных * активно взаимодействовать с командой разработчиков и аналитиками в рамках Agile-процессов * применять современные инструменты анализа данных и машинного обучения (LLM/GigaChat) для повышения эффективности своей работы.* уверенное владение Python и Spark SQL. Опыт работы с Git (GitHub/BitBucket). * знание SQL, глубокое понимание всех видов JOIN, группировок, агрегатных и оконных функций. * опыт оптимизации запросов, понимание планов исполнения и методов организации индексов и ключей * опыт работы с хранилищами данных (DWH), процессами ETL/ELT и методами инкрементальной загрузки данных (CDC) * навык работы с Jira для управления релизами и организацией рабочего процесса.* комфортный современный офис рядом с м. Кутузовская * офисный формат работы * ежегодный пересмотр зарплаты, квартальная и годовая премия (премия указывается в зависимости от должности и системы премирования) * корпоративный спортзал и зоны отдыха * более 400 образовательных программ СберУниверситета для профессионального и карьерного развития * программа адаптации и помощь руководителя на старте (для Junior позиций) * расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа * гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ * подписка Прайм с возможностью совместного использования на трёх близких * вознаграждение за рекомендацию друзей в команду Сбера.