АвитоСтарший Python-разработчик в команду Quality
удалёнка, Москва
Команда Quality внутри технической платформы Авито развивает внутренние продукты для уменьшения сбоев в продакшене и автоматизации рутины. Вы будете проектировать и внедрять платформу AI‑агентов, инструменты наблюдаемости и оценки качества для повышения надёжности сервисов
ГрейдSenior
Стек
PythonClaude CodeDifyn8nRAGLLM
Задачи
- •построение единой платформы для работы AI‑агентов от концепции до внедрения
- •разработка RAG‑пайплайнов на реальном времени
- •создание инструментов наблюдаемости и оценки качества моделей и агентов
- •проведение бенчмаркинга и A/B‑тестов на production‑данных
- •внедрение архитектурных решений для инициатив GenAI
Обязательно
- •опыт проектирования и внедрения платформ для AI‑агентов
- •опыт построения RAG‑пайплайнов на realtime данных
- •умение проектировать архитектуру GenAI с учётом масштабируемости и надёжности
- •опыт разработки инструментов наблюдаемости и оценки качества моделей
- •проведение бенчмаркинга и тестирования моделей на production‑данных
- •автономное ведение квартальных проектов «под ключ»
Будет плюсом
- •понимание ограничений LLM: контекстные окна, галлюцинации, задержки и стоимость
- •опыт оптимизации token economics, кеширования промптов и маршрутизации моделей
- •опыт оценки ROI on‑prem решений
