ML Engineer
Москва
Команда развивает масштабируемую рекомендательную платформу Сбера; вы будете строить и выводить в продакшн end-to-end ML‑пайплайны и рекомендательные модели, работать с петабайтами данных и оптимизировать инференс под высокие нагрузки
ГрейдSenior
Стек
PythonPySparkS3KubernetesAirflowPyTorchMLFlowFastAPIGitPyArrowPandas
Задачи
- •разработка и совершенствование end-to-end ML‑пайплайнов
- •построение продакшен-пайплайнов обработки данных на PySpark
- •разработка и оптимизация тренировки и инференса моделей на PyTorch на GPU‑кластере
- •performance‑оптимизации кода и онлайн‑инференса под высокую нагрузку
- •менторинг младших членов команды и обмен экспертизой
Обязательно
- •математический бэкграунд
- •хорошее знание Python
- •опыт работы с PySpark, PyArrow, Pandas
- •опыт написания production‑кода и промышленных пайплайнов с множеством шагов и зависимостей
- •опыт использования Airflow или другого industry‑standard оркестратора
- •понимание баз данных SQL / NoSQL
- •навыки работы с генеративными AI‑моделями
Будет плюсом
- •опыт работы с Kubernetes
- •опыт работы с MLFlow или аналогами
- •опыт распределённого обучения больших моделей на GPU‑кластере
- •опыт реализации online inference в условиях высокой нагрузки
- •опыт оптимизации пайплайнов препроцессинга данных под highload
- •опыт или образование в области финансов/банкинга