ЯндексАналитик-разработчик в Alice AI VLM
офис, удалёнка, гибрид
Команда оценивает и улучшает качество Alice AI VLM: создаёт и адаптирует бенчмарки, анализирует ошибки модели и строит пайплайны генерации обучающих данных для reasoning и tool-use сценариев; результаты повышают точность ответов для сложных пользовательских запросов
ГрейдJunior/Middle
Опыт1–3 года
Стек
PythonSQLGenerative modelsComputer Vision
Задачи
- •Анализ применимости опенсорсных бенчмарков и разработка собственных
- •Декомпозиция ошибок модели и построение таксономии типов ошибок
- •Поиск и приоритизация точек роста в поведении VLM
- •Проектирование и реализация пайплайнов генерации и фильтрации обучающих данных
- •Организация разметки с использованием judge-моделей и экспертов
Обязательно
- •опыт аналитики более года
- •уверенное владение Python для анализа данных
- •уверенное владение SQL для глубокого анализа
- •активное применение генеративных моделей в работе или повседневной жизни
Будет плюсом
- •опыт разработки judge-моделей или организации разметки с асессорами и экспертами
- •чтение профессиональной литературы на английском
- •знания основ машинного обучения
- •знакомство с компьютерным зрением
