ML-разработчик в команду Фотоинпута Alice AI VLM
офис, Санкт-Петербург
Команда Фотоинпута развивает Alice AI VLM — мультимодальную модель для ответов на изображения в чате. Вы будете обучать и улучшать модель (от pretrain до RLHF), строить пайплайны данных, развивать агентские навыки и оценивать изменения через метрики и A/B-тесты, чтобы улучшать полезность ответов пользователям
Стек
VLMRLHFNLPCVA/B-тестированиепайплайны данныхагентские tool-call навыки
Задачи
- •Обучать Alice AI VLM от pretrain до RLHF и улучшать её свойства
- •Разрабатывать качественные и нетривиальные награды для обучения (reward design)
- •Строить масштабируемые пайплайны сбора и разметки данных
- •Учить модель работать с внешними инструментами в agent/tool-call режиме
- •Оценивать изменения метриками, готовить кандидатов к выкатыванию и проводить A/B-тесты
- •Идентифицировать и внедрять новые фичи для роста качества ответов
Обязательно
- •Опыт обучения больших мультимодальных моделей
- •Глубокие знания в NLP и CV
- •Умение решать ML‑задачи полного цикла: сбор данных, разметка, обучение, деплой
- •Опыт разработки reward‑функций и обучения с RL/RLHF
- •Опыт построения пайплайнов данных для обучения моделей
- •Опыт оценки качества через метрики и A/B‑тестирование