ВкусВиллProduct Analyst в команду Buyer Assistant
офис, Москва
Команда Buyer Assistant ищет аналитика для построения системы оценки качества ответов AI‑ассистента: метрики, разметка, автоматизированный мониторинг и дашборды. Роль нужна для улучшения качества ответов и влияния на продуктовые метрики и поведение пользователей.
ГрейдMiddle/Senior
Стек
PythonSQLDashboardsA/B тестыPython инструменты для анализа данныхAI-инструменты (Cursor/Claude/Codex)
Задачи
- •Проектировать и поддерживать систему оценки качества ответов ассистента
- •Анализировать логи чатов и преобразовывать данные в метрики качества
- •Настроить автоматизированные проверки и дашборды мониторинга
- •Формализовывать критерии хорошего ответа для разных сценариев
- •Связывать качество ответов с продуктовыми метриками и оценивать эффект изменений
- •Генерировать задачи для продукта, ML и разработки на основе выводов
Обязательно
- •Уверенное владение SQL
- •Уверенное владение Python
- •Понимание статистики и дизайна экспериментов
- •Опыт работы с продуктовой аналитикой и дашбордами
- •Умение формализовать критерии качества и разметку
- •Навыки расследования причин проблем в логах и оценивания их влияния
- •Практический опыт использования AI‑инструментов с пониманием их ограничений
