ЯндексАналитик-разработчик в команду оценки качества Нейро
Команда качества Нейро работает над метриками и правилами оценки ответов Поиска с Алисой. Вы будете формализовать продуктовые критерии, создавать проекты по разметке данных и контролировать метрики качества, чтобы улучшать ответы модели и снижать количество ошибок
Стек
PythonSQLTolokaYandex Crowd
Задачи
- •Формализовать продуктовые требования в ясные критерии качества
- •Создавать проекты по разметке данных (краудсорсинг и LLM)
- •Разрабатывать инструкции и процессы для асессоров и AI‑тренеров
- •Анализировать метрики качества и искать точки оптимизации
- •Настраивать пайплайны подготовки данных и дашборды для контроля качества
Обязательно
- •Умение писать на Python
- •Умение писать на SQL
- •Знание математической статистики и теории вероятностей
- •Опыт работы с данными и получение практических результатов
- •Умение ясно излагать мысли и взаимодействовать в команде
- •Готовность разбираться в продуктовых требованиях
Будет плюсом
- •Опыт работы с Toloka или другими краудсорс‑платформами
- •Опыт написания инструкций и запуска проектов по разметке данных
