VKML-разработчик
Москва
Команда разрабатывает LLM-агентов и RAG-пайплайны для поддержки пользователей и внутренних процессов; вы будете строить и интегрировать продакшн-сервисы с мониторингом качества, метриками и стабильной эксплуатацией
ГрейдMiddle/Senior
Стек
PythonLangChainYTsaurusKafkaRedisLangfuseDockerKubernetesREST APIgRPCGit
Задачи
- •Разработка и развитие LLM‑агентов: сценарии, оркестрация, память и fallback-логика
- •Проектирование и внедрение RAG: индексация, эмбеддинги, ретриверы и ранжирование
- •Интеграция решений в прод: сервисы, API, взаимодействие с Kafka/Redis и хранилищами
- •Настройка наблюдаемости и мониторинга качества с Langfuse, дашбордами и алертами
- •Проведение офлайн/онлайн-оценки качества, A/B экспериментов и улучшение моделей на данных
- •Поддержка качества кода: тесты, ревью, документация и CI/CD
Обязательно
- •Уверенный Python: модули, типизация, тестирование и работа с API
- •Практический опыт с LLM/agentic‑подходами: промптинг, tool calling, управление контекстом
- •Опыт построения/внедрения RAG: embeddings, индексация, ретриверы и оценка качества
- •Понимание метрик качества: precision/recall/F1 и построение датасетов
- •Опыт разработки и эксплуатации сервисов: REST/gRPC, асинхронность, логирование, мониторинг
- •Опыт интеграций с очередями/кэшами/хранилищами (Kafka, Redis или аналоги)
- •Опыт работы с Git и CI/CD практиками
Будет плюсом
- •Опыт с LangGraph, LangChain и Langfuse
- •Опыт с YTsaurus или распределёнными хранилищами
- •Опыт быстрых прототипов и доведения их до production
- •Знание ранжирования, rerank, hybrid search и guardrails
- •Опыт A/B‑тестирования и работы с продуктовыми метриками
- •Опыт контейнеризации и деплоя (Docker, Kubernetes)
