Аналитик-разработчик (Gigachat B2C)
Summary
Develops and evaluates pipelines for integrating large language models (LLMs) like GigaChat into Sber’s consumer products, focusing on data analysis, metrics, and model improvement.
Наша команда занимается интеграцией LLM-GigaChat в продукты Сбера с многомиллионной аудиторией. Мы делаем доступным для всех опыт взаимодействия с передовыми большими языковыми моделями.
Обязанности
- Разрабатывать пайплайны для анализа моделей, сбора данных и разметки.
- Создавать и внедрять метрики оценки качества работы сложных систем с LLM.
- Проводить эксперименты для улучшения метрик базовой модели и других LLM-based-систем.
- Работать со сложными пайплайнами разметки.
- Использовать LLM-as-a-Judge в процессах.
Требования
- Уверенно владеет Python.
- Понимает ML-метрики и анализ данных.
- Применяет статистику и теорию вероятностей на практике.
Условия
- Комфортный современный офис рядом с м. Кутузовская.
- Ежегодный пересмотр зарплаты, годовая премия.
- Корпоративный спортзал и зоны отдыха.
- Система обучения для профессионального и карьерного развития.
- Расширенный полис ДМС с первого дня работы и страхование для семьи.
- Льготная программа ипотеки для сотрудников.
- Бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров.
- Вознаграждение за рекомендацию друзей в команду Сбера.