Аналитик-разработчик офлайн-метрик в Яндекс Картинки
Основная метрика качества картинок Corsa строится из оценок асессоров по отдельным сигналам: релевантности, авторитетности источника и другим. Она задаёт таргет для поисковых алгоритмов ранжирования картинок по запросу в Поиске. Мы постоянно улучшаем ключевые метрики Поиска, и перед командой сейчас стоит множество вызовов.
Наша команда создаёт технологии, которыми ежедневно пользуются миллионы людей, а качество поиска напрямую зависит от точности метрик. Мы работаем на стыке аналитики, машинного обучения и компьютерного зрения, внедряя современные VLM-модели и новые подходы к автоматизации оценки качества. Вы будете решать сложные исследовательские задачи, напрямую влияющие на развитие одного из крупнейших поисковых сервисов Яндекса.
Улучшение офлайн-метрик
Вам предстоит разобраться с устройством офлайн-метрик и помогать улучшать их качество по всему пайплайну: от оценок отдельных сигналов асессорами до формы итоговой метрики. Вы будете исследовать, формулировать и оцифровывать проблемы в метрике и итоговом ранжировании, придумывать и реализовывать способы их исправления.
Автоматизация
Вы будете исследовать и интегрировать модели, такие как Visual Language Models (VLM), Deep Semantic Similarity Model (DSSM) и другие, чтобы автоматизировать процесс разметки данных, который традиционно выполняется асессорами. Вам нужно разобраться в текущем процессе разметки, вы будете искать подходящие модели для замены ручной работы, а также трудиться над экономической эффективностью процесса. Готовьтесь изучать, идентифицировать и решать проблемы, возникающие при внедрении моделей, находить оптимальные решения и реализовывать их, тем самым повышая точность и скорость обработки данных.
Оценка качества метрики и её изменений
Вместе с командой вы будете искать ответы на вопросы, как правильно замерять улучшения в метрике или её отдельных компонентах, а также как оценить, насколько текущая метрика далека от идеала.
Больше об аналитике в Яндексе — в канале Yandex for Analytics
- Анализировали данные на Python или SQL
- Владеете основами теории вероятностей и математической статистики
- Умеете решать нестандартные математические задачи
- Способны спокойно и аргументированно отстаивать свою точку зрения и выслушивать чужую
- Любите математику
- Участвовали и побеждали в олимпиадах по математике, физике, программированию
- Работали со статистическими программами
- Читаете и понимаете профильные тексты на английском языке
- Владеете базовыми знаниями в машинном обучении
