Дата-аналитик
офис, Екатеринбург
Команда Sber Process Mining развивает систему анализа бизнес‑процессов; вы будете собирать, очищать и преобразовывать данные для аналитики и AI‑функций, чтобы обнаруживать узкие места и повышать эффективность процессов
ГрейдMiddle
Стек
PythonSparkClickHouseHiveGreenplumPandasNumPySQL
Задачи
- •поиск и подключение источников данных и оформление доступов
- •выгрузка и исследование семплов данных, оценка качества
- •написание скриптов для обработки и преобразования данных (SQL/Python)
- •оптимизация запросов для больших объёмов данных, использование CTE и оконных функций
- •формирование требований на доработку источников и потоков данных
Обязательно
- •высшее образование
- •уверенное знание SQL (Hive / Greenplum / ClickHouse)
- •умение писать запросы для выгрузки больших данных и оптимизировать их (CTE и др.)
- •опыт работы с оконными функциями
- •знание Python и библиотек Pandas, NumPy, datetime
- •умение обрабатывать и приводить даты, заполнять пропуски
Будет плюсом
- •опыт работы со Spark
- •опыт в проектах с большими объёмами данных