Мы работаем над новыми пользовательскими продуктами — AI-ассистентами на базе LLM. Пять ассистентов помогают клиентам в разных сферах жизни: финансах, инвестициях, шопинге, путешествиях. Еще есть Джуниор — детский ассистент.
Задача аналитика качества — сделать так, чтобы ассистенты отвечали понятно, не придумывали лишнего и были полезны для пользователя. У нас новый продукт и команда: мы выстраиваем процессы с нуля без легаси. Вы сможете влиять на подходы к решениям с первого дня, а мы поддержим вашу инициативу.
Вам предстоит разобраться в способах оценки моделей и специфике работы LLM. Мы тесно взаимодействуем с командой NLP, поэтому ждем коллегу с насмотренностью, который будет с нами на одной волне и сможет привносить новые фичи в продукт.
Основная задача на первые месяцы в этой роли — научиться понимать успешность нового релиза до раскатки на пользователей. Чем меньше времени будет занимать такая оценка, тем быстрее мы сможем развивать продукт. Мы хотим уходить от ручных процессов, поэтому планируем автоматизировать часть работы с разметкой.
Узнать больше о профессии: продуктовые аналитики в Т-Банке.