Аналитик BigData
Москва
Команда аналитиков/дата-инженеров Блока Финансы готовит и доставляет качественные наборы данных и витрины для дата-сайентистов и бизнес‑аналитики. Работа над выгрузками, оптимизацией запросов и построением DWH/витрин для обучения моделей и принятия решений
Стек
PythonSPARKGreenPlumHadoopTrinoHDFSGatewaySQL
Задачи
- •Поиск и анализ исходных данных в DWH и исходных системах банка
- •Разработка выгрузок и ad-hoc извлекающих запросов
- •Проектирование и разработка витрин и наполнение их данными
- •Оптимизация и ускорение сложных SQL/ Spark‑запросов
- •Взаимодействие с бизнес-заказчиками и сбор/формализация требований
Обязательно
- •Опыт работы с SQL или SPARK API
- •Опыт разработки и оптимизации сложных SQL‑запросов на больших таблицах
- •Опыт работы с Hadoop и/или SPARK
- •Знание банковских продуктов и опыт работы с банковскими данными
- •Опыт работы с классическими СУБД (Teradata, Oracle, MS SQL, MySQL, PostgreSQL и т.п.)
- •Опыт проектирования и внедрения DWH/BI и разработки промышленных решений
- •Опыт сбора и документирования требований