LamodaData Scientist (LLM / Agents)
Москва
В команде ML будете развивать AI‑агентов и систему оценки качества моделей: добавлять мультимодальную обработку контекста, строить RAG и инструменты агентов, собирать датасеты и метрики для верифицируемой оценки, чтобы повышать долю автоматически закрываемых обращений и снижать ошибки в проде
ГрейдMiddle/Senior
Опытот 3 лет
Стек
PythonFastAPIPostgreSQLDockerLangGraphOpenAI Agents SDKGoogle ADKRedisAirflow
Задачи
- •Улучшать получение контекста и поддержку мультимодальных данных (изображения, таблицы)
- •Разрабатывать и добавлять новые инструменты агента для увеличения доли автоматически закрываемых обращений
- •Развивать систему оценки: собирать датасеты, разрабатывать метрики и строить диалоговые симуляции
- •Создавать верифицируемую среду оценки и LLM-as-Judge подходы
- •Анализировать ошибки в проде и фидбек пользователей, исследовать подходы к памяти агентов и взаимодействию между компонентами
Обязательно
- •Промышленная ML‑разработка от 3 лет
- •Свободное владение Python и практика написания воспроизводимого качественного кода
- •Опыт разработки AI‑агентов с использованием LangGraph, OpenAI Agents SDK или Google ADK и понимание паттернов (memory, planning, structured output)
- •Опыт построения систем оценки агентов: LLM-as-Judge, FactScore, RAGAS
- •Опыт разработки RAG: retrieval, чанкование, sparse/dense/hybrid поиск и reranking
- •Знание ML/DL и NLP: метрики качества, embeddings, устройство трансформеров
- •Опыт с FastAPI, Docker, Redis, PostgreSQL и/или Airflow
