Аналитик-разработчик в команду ранжирования ответов Алисы
Команда работает над улучшением ответов Алисы и развитием Yandex Search API для выдачи релевантных инфоконтекстов. Роль включает разработку и проверку сигналов ранжирования, проведение экспериментов и доведение решений до продакшна для повышения качества ответов
Стек
PythonSQLYandex Search APIA/B-тестыгенеративные моделиметрики и бенчмарки
Задачи
- •Проектировать и реализовывать эксперименты по улучшению ранжирования
- •Идентифицировать и тестировать сигналы для ранжирования
- •Создавать бенчмарки и замеры качества инфоконтекстов
- •Доводить идеи от гипотезы до выката в продакшен
- •Анализировать результаты A/B-тестов и принимать решения на их основе
Обязательно
- •Знание теории вероятностей и математической статистики
- •Умение формулировать и проверять гипотезы и интерпретировать A/B-результаты
- •Уверенная работа с Python или SQL для анализа данных
- •Способность решать нестандартные задачи и выстраивать рассуждение с нуля
- •Умение превращать гипотезу в работающий эксперимент и доводить до реализации
- •Интерес к ML и генеративным моделям
Будет плюсом
- •Опыт работы с большими объёмами данных