Аналитик-разработчик офлайн-метрик в Яндекс Картинки
Summary
Analyzes and improves offline metrics for Yandex Images' ranking system, integrating AI models to automate data labeling and enhance metric accuracy.
Картинки — один из главных продуктов Яндекса. Мы постоянно улучшаем качество ранжирования картинок и сейчас ищем аналитика-разработчика офлайн-метрик для поддержания этих улучшений по всему пайплайну. Вам предстоит исследовать, формулировать и оцифровывать проблемы в метрике и итоговом ранжировании, придумывать и реализовывать способы их исправления.Улучшение офлайн-метрик
Вам предстоит разобраться с устройством офлайн-метрик и помогать улучшать их качество по всему пайплайну: от оценок отдельных сигналов асессорами до формы итоговой метрики. Вы будете исследовать, формулировать и оцифровывать проблемы в метрике и итоговом ранжировании, придумывать и реализовывать способы их исправления. Автоматизация
Вы будете исследовать и интегрировать модели, такие как Visual Language Models (VLM), Deep Semantic Similarity Model (DSSM) и другие, чтобы автоматизировать процесс разметки данных, который традиционно выполняется асессорами. Вам нужно разобраться в текущем процессе разметки, вы будете искать подходящие модели для замены ручной работы, а также трудиться над экономической эффективностью процесса. Готовьтесь изучать, идентифицировать и решать проблемы, возникающие при внедрении моделей, находить оптимальные решения и реализовывать их, тем самым повышая точность и скорость обработки данных. Оценка качества метрики и её изменений
Вместе с командой вы будете искать ответы на вопросы, как правильно замерять улучшения в метрике или её отдельных компонентах, а также как оценить, насколько текущая метрика далека от идеала. **Больше об аналитике в Яндексе — в канале Yandex for Analytics*** Анализировали данные на Python или SQL * Владеете основами теории вероятностей и математической статистики * Умеете решать нестандартные математические задачи * Способны спокойно и аргументированно отстаивать свою точку зрения и выслушивать чужую* Любите математику * Участвовали и побеждали в олимпиадах по математике, физике, программированию * Работали со статистическими программами * Читаете и понимаете профильные тексты на английском языке * Владеете базовыми знаниями в машинном обучении
Вам предстоит разобраться с устройством офлайн-метрик и помогать улучшать их качество по всему пайплайну: от оценок отдельных сигналов асессорами до формы итоговой метрики. Вы будете исследовать, формулировать и оцифровывать проблемы в метрике и итоговом ранжировании, придумывать и реализовывать способы их исправления. Автоматизация
Вы будете исследовать и интегрировать модели, такие как Visual Language Models (VLM), Deep Semantic Similarity Model (DSSM) и другие, чтобы автоматизировать процесс разметки данных, который традиционно выполняется асессорами. Вам нужно разобраться в текущем процессе разметки, вы будете искать подходящие модели для замены ручной работы, а также трудиться над экономической эффективностью процесса. Готовьтесь изучать, идентифицировать и решать проблемы, возникающие при внедрении моделей, находить оптимальные решения и реализовывать их, тем самым повышая точность и скорость обработки данных. Оценка качества метрики и её изменений
Вместе с командой вы будете искать ответы на вопросы, как правильно замерять улучшения в метрике или её отдельных компонентах, а также как оценить, насколько текущая метрика далека от идеала. **Больше об аналитике в Яндексе — в канале Yandex for Analytics*** Анализировали данные на Python или SQL * Владеете основами теории вероятностей и математической статистики * Умеете решать нестандартные математические задачи * Способны спокойно и аргументированно отстаивать свою точку зрения и выслушивать чужую* Любите математику * Участвовали и побеждали в олимпиадах по математике, физике, программированию * Работали со статистическими программами * Читаете и понимаете профильные тексты на английском языке * Владеете базовыми знаниями в машинном обучении