AQA инженер (AI-агенты)
удалёнка, гибрид
Команда AI-агентов разрабатывает голосовые и текстовые ассистенты для продуктов 2ГИС и Отелло. Роль фокусируется на организации процесса тестирования, создании автотестов и нагрузочного мониторинга цепочек генерации для обеспечения качества и безопасности сервисов
ГрейдMiddle/Senior
Опытот 5 лет
Стек
PythonLangChainLangfuseREST APILangGraphLoad testingMonitoring
Задачи
- •Проектирование и внедрение процесса тестирования AI-агентов
- •Разработка и поддержка автотестов на Python (E2E и интеграционные)
- •Проведение ручного, функционального, системного и нагрузочного тестирования
- •Тестирование robustness, safety и prompt injection сценариев
- •Настройка продакшен-мониторинга и алертов на качество ответов
- •Подготовка тестовых данных и сценариев для диалоговых цепочек
Обязательно
- •опыт в тестировании не менее 5 лет
- •написание автотестов на Python
- •опыт нагрузочного/перформанс тестирования
- •опыт формирования процесса тестирования высоконагруженных продуктов
- •знание архитектур AI-агентов (ReAct, RAG, Tool Use и пр.)
- •понимание принципов работы LLM и токенизации
- •опыт работы с LangChain/LangGraph или аналогичными фреймворками
Будет плюсом
- •опыт в стартапах или быстрорастущих продуктах
- •опыт работы с Jira и Confluence
- •знание принципов RAG (Retrieval-Augmented Generation)