ЯндексАналитик GPT-моделей в Алису
офис, гибрид
Команда Алисы ищет аналитика для построения пайплайнов сбора данных, офлайн и онлайн оценки качества моделей и разработки метрик для агентских сценариев. Работа важна для улучшения пользовательского опыта ассистента и принятия продуктовых решений на основе данных
ГрейдMiddle/Senior
Стек
PythonPandasSQLNLPGitA/B testing
Задачи
- •Разработка и поддержка пайплайнов сбора и предобработки данных
- •Проектирование и внедрение офлайн-метрик качества моделей
- •Подготовка данных и метрик для A/B-экспериментов и онлайн-оценки
- •Анализ качества решений агентских задач и формализация критериев
- •Работа над персонализацией, памятью и репрезентацией поведения ассистента
Обязательно
- •Знание теории вероятностей и математической статистики
- •Глубокое владение SQL
- •Глубокое владение Python и Pandas
- •Умение писать production-аналитический код
- •Опыт в Data Science и продуктовой аналитике
- •Навыки проектирования эффективных процессов обработки данных
Будет плюсом
- •Опыт с NLP и обработкой естественного языка
- •Опыт с краудсорсинговыми разметками
- •Опыт обучения или взаимодействия с ML-командами
