Привет!
мы команда Ассистента Покупателя — AI-ассистента, который помогает покупателям выбирать подходящие товары и быстрее принимать решение о покупке.
Сейчас мы запускаем продукт на широкую аудиторию и ищем продуктового аналитика, который возьмет на себя построение системы оценки качества ответов ассистента: от критериев, метрик и разметки до автоматизированного мониторинга и регулярного цикла улучшений.
Это роль для аналитика, который готов работать с качеством AI-продукта как с самостоятельной продуктовой системой: понимать сценарии пользователей, формализовывать критерии качества, находить причины проблем в ответах и помогать команде принимать решения на основе данных.
Чем предстоит заниматься:
Отвечать за систему оценки качества ответов Ассистента Покупателя: сценарии, критерии хорошего ответа, разметку, автоматические проверки, дашборды, локализацию проблем и оценку эффекта изменений.
Анализировать десятки тысяч чатов и превращать логи, частичную разметку и продуктовые метрики в понятную картину качества.
Формализовывать критерии хорошего ответа для разных сценариев: где важна фактическая точность, где полезность, где полнота, где осторожность формулировок, а где важно не давать никакого ответа совсем.
Настроить автоматизированную оценку качества ответов и дашборд мониторинга: динамику качества, проблемные сценарии, типы ошибок, зоны риска и изменения после релизов.
Связывать качество ответов с продуктовыми метриками: добавления товаров, NPS / CSAT и поведение пользователей после ответа ассистента.
Находить системные проблемы в ответах и превращать их в конкретные задачи для продуктовой команды, аналитики, ML и разработки.
Умеешь мыслить как владелец системы качества, а не как исполнитель отдельных аналитических запросов.
Уверенно работаешь с SQL и Python: можешь самостоятельно достать данные, подготовить наборы для оценки, автоматизировать проверки и воспроизвести результаты анализа.
Понимаешь статистику, эксперименты и ограничения метрик в AI-продуктах: знаешь, где метрика действительно отражает качество, а где может вводить команду в заблуждение.
Умеешь не только находить проблемы, но и оценивать их масштаб, частотность, влияние на пользователя и приоритет для команды.
Имеешь практический интерес к AI и уже используешь AI-инструменты в работе: Cursor, Claude Code, Codex или аналоги для написания кода, анализа данных, прототипирования проверок и исследования логов.
Понимаешь ограничения AI-инструментов: умеешь проверять сгенерированный SQL и Python, валидировать выводы, отделять черновик от надежного результата и не переносить ошибки модели в аналитические решения.
Доход и стабильность:
Конкурентное вознаграждение, которое обсудим индивидуально на собеседовании;
Официальное оформление по ТК РФ;
Полностью белая зарплата с гарантированными выплатами 2 раза в месяц.
Свобода и развитие:
Высокий уровень самостоятельности и реальная возможность влиять на результат;
Интересные и масштабные задачи для профессионального роста;
Обучение за счёт компании: тренинги, семинары, книжный клуб.
Забота о здоровье и комфорт:
Частичная компенсация ДМС, медицинских услуг, лекарств и абонемента в фитнес-клуб;
Психологическая поддержка и страхование жизни от несчастных случаев;
Материальная помощь в особых жизненных ситуациях;
Кешбэк 15% бонусами на покупки во «ВкусВилл» и бонусы на важные даты;
Присоединяйся к команде, которая делает жизнь людей более здоровой и вкусной!
Центр Интеграции Приложений
Москва
от 120000 RUR
Москва
до 5000 USD