Ведущий Инженер по данным (Data Engineer) [CVM B2B, МТС Веб Сервисы]
Summary
MTS (МТС Веб Сервисы) seeks a Lead Data Engineer to develop reporting for its CVM B2B product: building and optimizing data pipelines, ensuring data quality, designing storage schemas and data marts, and integrating sources into the DataLake. Core stack: SQL, Python, ClickHouse, Airflow, Spark, Hadoop ecosystem.
Мы находимся в поисках Ведущего Инженера по данным (Data Engineer). Вам предстоит развивать направление отчетности продукта CVM B2B.
Чем предстоит заниматься:
- создавать и оптимизировать пайплайны для сбора и обработки данных;
- контролировать качество данных;
- проектировать схемы для хранения данных;
- автоматизировать построения витрин данных;
- оптимизировать запросы;
- подготавливать техническую документацию;
- разрабатывать и оптимизировать витрины данных;
- проводить интеграцию различных источников данных в DataLake;
- создавать процессы репликаций в различные СУБД;
- оптимизировать и поддерживать существующие ETL-процессы;
- участвовать в Code Review.
- опыт работы от 5 лет в качестве Data Инженера;
- опыт работы в продуктовой команде от года;
- опыт работы с SQL;
- опыт работы с Python и библиотеками для построения ETL процессов;
- знания ClickHouse, onETL, Airflow, Spark;
- умение работать с большими массивами данных (Hadoop, Hive, NiFi, GreenPlum);
- владение Git.
Будет плюсом:
- опыт работы с доставкой данных (Kafka, Flink).
-
собственную платформу MTS Ocean для получения ИТ-ресурсов, а это значит, что деплой, мониторинг, observability — не будут для тебя проблемой, ты сможешь сосредоточиться на фичах;
-
профессиональные гильдии инженеров, где мы поддерживаем друг друга и помогаем стать лучше;
-
внутреннюю площадку TechTalks для обмена опытом, дискуссий, развития навыков самопрезентации;
-
участие во внешних IT конференциях. Наши эксперты выступают на ведущих профильных конференциях, таких как HighLoad++, DevOps Conf, Joker, AHA!, Матемаркетинг и другие. А еще мы организуем собственную масштабную конференцию True Tech Day и регулярно проводим митапы для разработчиков и инженеров.
-
полезные курсы и вебинары в корпоративном университете и электронную библиотеку;
А еще:
-
ДМС с первого месяца работы, включая стоматологию;
-
страхование от несчастных случаев с 1 месяца работы. Материальную помощь в сложных жизненных ситуациях;
-
отпуск 28 календарных дней (+3 дополнительных дня за ненормированный рабочий день);
-
прием врачей общей практики и массаж в офисе;
-
мобильная связь за счет компании и льготные тарифы для близких;
-
подписка на онлайн-кинотеатр KION, сервис МТС Музыка, книжный сервис Строки от МТС, безлимитные мессенджеры и соцсети.