Data Engineer / Data Analyst в отдел аудита
Summary
The Data Engineer/Analyst will process large datasets using Apache Spark and Hadoop to identify risks and anomalies for the retail business. The role involves developing complex SQL queries and translating business requirements into technical solutions.
Если ты хочешь помогать розничному бизнесу улучшать процессы с использованием цифровых аналитических инструментов и методов, мы ждем тебя в своей команде. Команда ожидает инициативного профессионала, обладающего высоким уровнем ответственности, внимательностью к деталям и развитым аналитическим мышлением.### Что нужно делать:
* обрабатывать большие объёмы данных с использованием Apache Spark и Hadoop, выявлять аномалии, нарушения и потенциальные риски
* разрабатывать и оптимизировать сложные SQL-запросы для анализа больших объёмов данных
* взаимодействовать с аналитиками: понимать бизнес-задачи, формализовывать требования и переводить их в технические решения### Мы ждём, что ты:
* имеешь опыт работы в роли Data Engineer или Data Analyst
* уверенно владеешь Python и имеешь практический опыт работы с PySpark, pandas и logging
* хорошо знаешь SQL: умеешь писать сложные запросы, использовать оконные функции, анализировать планы выполнения и оптимизировать запросы
* имеешь опыт работы с Apache Spark: умеешь писать и оптимизировать задачи на PySpark, понимаешь принципы распределённых вычислений
* знаком(а) с экосистемой Hadoop: понимаешь архитектуру HDFS и YARN, работу с партициями и распределённое хранение данных
* умеешь самостоятельно разбираться в бизнес-требованиях и находить подходящие технические решения.
Наличие опыта в работы с MPP-СУБД: уверенное знание Greenplum (понимание принципов распределения данных Distribution Keys, партицирования, индексирования и оптимизации запросов в распределенной среде), знание основ Git будет вашим преимуществом.### **Что мы предлагаем:**
* стабильный оклад, годовой бонус
* место работы: Санкт-Петербург, пр-кт Шафировский, 2, литер В
* график работы 5/2 с 9:00 до 18:00, пт - 9:00 до 16:45 (только офис)
* официальное оформление с первого дня
* уникальную систему онлайн обучения Сбера для карьерного развития и роста
* гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
* расширенный ДМС и льготное страхование для семьи
* подписка Прайм с возможностью совместного использования на трёх близких
* вознаграждение за рекомендацию друзей в команду Сбера.