Middle Data scientist NLP (валидация GenAI решений)
Summary
Middle data scientist validating generative AI and LLM-based solutions for a large Russian bank, focusing on model risk management and automated validation pipelines.
Наша команда занимается оценкой и управлением модельным риском. Модельный риск возникает вследствие решений, которые основаны на неверных или неправильно интерпретируемых моделях, что приводит к финансовым и репутационным потерям.
Мы валидируем все модели Сбера, способные значимо повлиять на финансовый результат, разрабатываем и автоматизируем методы для валидации моделей различных классов. А также строим систему отчетности для управления модельным риском и платформу для онлайн-мониторинга и автовалидации моделей.
Обязанности
- разбираться в архитектурах LLM, а также решениях на их основе (агенты, RAG и тд)
- тестирование корректности моделей на корректность GenAI решений
- исследовать подходы к моделированию и валидации различных GenAI решений, определять их методологию, применять передовые технологии и распространять наработки
- автоматизировать процесс валидации.
Требования
- высшее образование в области технических / физико-математических наук
- знание классического машинного обучения и статистического анализа
- знание алгоритмов и структур данных
- знание Python и библиотек анализа данных: PyTorch, HuggingFace и Transformers
- знание PySpark, SQL
- опыт работы с базами данных
- опыт модельной аналитики и управления модельным стеком в бизнес-процессе
- понимание принципов устройства, обучения и оценки качества больших лингвистических моделей (LLM) и генеративных трансформеров типа GPT
- навыки работы с генеративными AI-моделями; опыт создания AI-агентов и использования их в работе будет преимуществом
- опыт использования GigaChat, Kandinsky и аналогов в продуктах, навыки создания и использования AI-агентов
- инструментальное владение AI для анализа, генерации и автоматизации.
Условия
- работа в удобном и современном офисе недалеко от станции метро Кутузовская.
- ежегодный пересмотр зарплаты, годовая премия
- корпоративный спортзал и зоны отдыха
- более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
- расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
- гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
- подписка Прайм с возможностью совместного использования на трёх близких
- вознаграждение за рекомендацию друзей в команду Сбера.