ЯндексML-разработчик в команду VLM Foundations
офис, гибрид, Санкт-Петербург
Команда VLM Foundations работает над дообучением и интеграцией vision-language моделей для задач вождения: предсказание траекторий, интерпретируемость действий и интеграция новых модальностей. Результат повышает безопасность и качество принятия решений в автономных системах.
ГрейдMiddle/Senior
Стек
PythonDeep LearningVision-language моделиReinforcement LearningNLPраспределённое обучение
Задачи
- •Дообучение VLM для предсказания траекторий и понимания дорожной обстановки
- •Добавление энкодеров для новых модальностей (карты, лидары)
- •Ускорение инференса: action modality injection, спекулятивное декодирование, flow matching head
- •Разработка и внедрение RL-методов для безопасных и интерпретируемых решений
- •Построение масштабируемой системы обучения в симуляции и борьба с reward hacking
- •Внедрение SOTA-решений и быстрая проверка гипотез
Обязательно
- •Знание Python
- •Понимание принципов машинного обучения и NLP-моделей
- •Опыт обучения и внедрения моделей глубокого обучения в продакшен
- •Опыт работы с большими объёмами данных
- •Знание классических алгоритмов и структур данных
- •Интерес к исследованиям и чтению профильных статей (SOTA)
Будет плюсом
- •Опыт работы с vision-language моделями (VLM)
- •Опыт распределённого обучения
