Data Analyst / ML Analyst (ИИ в Яндекс.Авто)
офис, гибрид
Команда Яндекс.Авто развивает встраиваемого ИИ-ассистента в автомобиле. Вы будете анализировать логи и поведение пользователей, строить систему оценки качества моделей и собирать данные для обучения, чтобы улучшать работу ассистента в автосценариях и tool-calling цепочках
ГрейдMiddle
Опытот 2 лет
Стек
PythonLLM/Generative AISQLTableauDataLensSupersetNLP/NLU
Задачи
- •анализ логов и пользовательских сценариев автомобильного ассистента
- •поиск и сегментация проблемных кейсов и негативных паттернов
- •построение и развитие системы оценки качества моделей и evals
- •поддержка развития tool-calling-архитектуры для автосценариев
- •сбор и подготовка датасетов для обучения и приёмки моделей
Обязательно
- •опыт от 2 лет в роли Data/Product/Analyst в data-driven продукте
- •опыт работы с LLM/Generative AI вне бытовых задач
- •практика продуктовой аналитики и поиска инсайтов через данные
- •уверенное владение SQL и Python для анализа данных
- •опыт работы с большими объёмами логов и событийных данных
- •знание основ статистики и A/B-тестирования
- •умение формулировать продуктовые гипотезы и оценивать эффект
Будет плюсом
- •опыт с LLM-based продуктами или AI-ассистентами
- •опыт оценки качества LLM (LLM-as-a-judge, evals, RAG)
- •опыт с NLP/NLU или голосовыми ассистентами
- •знание концепций Agentic AI и tool calling
- •умение строить дашборды (Tableau, DataLens, Superset)
- •понимание цикла обучения и улучшения ML/LLM-моделей
- •опыт работы с неструктурированными данными и текстовыми логами