Стажер Data Engineer в команду Dynamic Pricing [Big Data, МТС Веб Сервисы]
гибрид, Москва
Команда Dynamic Pricing развивает платформу для гибкого управления ценами товаров, услуг и подписок. Роль в основном про сбор, обработку и подготовку данных для тарифных и ценовых механизмов, чтобы повышать доходность и сегментацию предложений
ГрейдJunior
Стек
PythonPySparkPostgreSQLKafkaHadoopAirflowHiveRedisGreenplumGit
Задачи
- •Разработка ETL-процедур и пайплайнов данных
- •Сбор и интеграция данных из реляционных и нереляционных источников
- •Создание и наполнение витрин данных в Hive/Postgres/Greenplum
- •Поддержка и отладка существующих дата-процессов и пайплайнов
- •Оформление и актуализация технической документации
- •Участие в обсуждениях архитектуры обработки данных
Обязательно
- •Студент 3–6 курса бакалавриата/специалитета/магистратуры
- •Хорошее знание Python
- •Уверенное знание SQL и опыт работы с реляционной СУБД
- •Понимание принципов ETL и работы с данными
- •Понимание работы с Git
- •Базовые знания Hadoop/PySpark/Airflow или готовность быстро изучать их