Разработчик в группу разработки ML-инфраструктуры YT
офис, удалёнка, гибрид, Москва
Команда ML-инфраструктуры в составе YTsaurus развивается платформу для хранения данных и запуска долгих распределённых ML-обучений. Вы будете улучшать надёжность, автоматизировать обнаружение ошибок и оптимизировать использование GPU, чтобы ускорять работу ML‑команд Яндекса.
ГрейдMiddle/Senior
Стек
PythonC++GoYTsaurusGPU
Задачи
- •Разрабатывать библиотеку распределённых обучений и интеграции с системами запуска
- •Автоматизировать обнаружение и восстановление после ошибок обучений
- •Создавать инструменты мониторинга и профилирования использования GPU
- •Диагностировать и устранять нестабильности в распределённых сценариях
- •Работать с кодовой базой на Python, C++ и Go
Обязательно
- •Уверенное владение Python, Go или C++
- •Понимание распределённых систем и умение работать со сложным кодом
- •Способность быстро погружаться в новые задачи и находить оптимальные решения
- •Готовность разбираться в нестандартной предметной области и системы
Будет плюсом
- •Опыт взаимодействия с пользователями и помощь в диагностике проблем
- •Понимание процессов и принципов ML-обучения