Стажер Data Engineer в Аналитика Datagovernance [Big Data, МТС Веб Сервисы]
гибрид, Москва
В команде Big Data MWS — дата-юните компании — стажёр будет развивать ETL-процессы и наполнять витрины для сервисов datagov, обеспечивая доступность данных для аналитики и продуктовых сервисов
ГрейдJunior
Стек
PythonPySparkPostgreSQLAirflowHiveClickHouseGreenplumHadooppandaspolarsSQL
Задачи
- •Разрабатывать ETL-процедуры для сервисов datagov
- •Собирать данные из реляционных и нереляционных источников
- •Создавать и наполнять витрины в Hive/Postgres/ClickHouse/Greenplum
- •Автоматизировать пайплайны через Airflow и Spark
- •Работать под руководством наставника в команде Big Data
Обязательно
- •студент 3–6 курса бакалавриата/специалитета/магистратуры
- •хорошее знание Python
- •уверенное знание SQL
- •умение работать с реляционной СУБД
- •готовность к занятости 30–40 часов в неделю
Будет плюсом
- •опыт с pandas/polars/spark и аналогичными фреймворками обработки данных