ЯндексML-разработчик в команду Alice AI VLM Agents
Команда развивает VLM-агентов, которые планируют действия, вызывают внешние инструменты и решают сложные визуальные сценарии для продуктовых сценариев Яндекса. Роль важна для превращения исследований в надёжные функции, используемые миллионами пользователей.
Стек
VLMLLMReinforcement Learningагентные пайплайнымультимодальное обучениеtool callingсреды обучения и оценки
Задачи
- •обучать модель надёжно вызывать внешние инструменты (tool calling)
- •развивать агентское планирование и многошаговое поведение VLM
- •проектировать и строить продовые и непродовые окружения для обучения и оценки агентов
- •повышать устойчивость агентского поведения на длинных траекториях
- •формулировать гипотезы, запускать эксперименты и анализировать результаты
Обязательно
- •глубокие знания в ML и уверенное понимание современных LLM или VLM
- •практический опыт в CV, NLP или мультимодальном обучении
- •знание и понимание применения Reinforcement Learning
- •понимание построения агентов и tool calling поверх LLM/VLM или желание этим заниматься
- •умение формулировать гипотезы, ставить аккуратные эксперименты и делать выводы по результатам
Будет плюсом
- •опыт работы с агентами, автономными пайплайнами или RL в интерактивных средах
- •опыт обучения больших моделей или large-scale ML-систем
- •опыт с tool calling и обучением моделей работе с внешними инструментами
- •понимание ограничений современных VLM и следование трендам в области агентов
