Дата инженер (Data engineer) Управление модельных рисков и валидации
Summary
A Data Engineer at VTB Bank responsible for evaluating model risk and validating models, focusing on data quality analysis, data warehouse preparation, automation of validation processes, and working on data lakes and MLOps, using SQL, PySpark, and Python.
Работа в составе команды валидации, которая занимается оценкой эффективности моделей в анализируемом процессе и оценкой модельных рисков.
Обязанности:
- анализ качества данных: постановка задач, code-review кода сбора данных, поиск аномалий, ошибок и несоответствий в данных (SQL, PySpark, Python);
- подготовка агрегированных витрин данных и выборок для проведения валидации;
- формирование отчетов по результатам проведенных проверок;
- автоматизация процессов контроля и отчетности: сбор данных, библиотеки по проверкам качества данных и моделей, формирование отчетов (Python, PySpark);
- подготовка требований к формату и составу витрин для поставщиков данных;
- участие в проектах, связанных с витринами данных, банковским хранилищем, MLOps.
- высшее физико-математическое/техническое/экономическое образование;
- опыт работы в Банках, подразделениях ИТ или ИТ компаниях от 1 года;
- уверенные знания SQL, Python;
- опыт работы с PySpark, понимание устройства Hadoop;
- опыт работы с BI системами и инструментами визуализации;
- знание стандартов по качеству данных как преимущество.