СберSenior Data Engineer
офис, гибрид, Москва
Команда Sber Process Mining развивает платформу аналитики бизнес‑процессов на данных клиентов. Вы будете строить ETL/ELT‑пайплайны, модели данных и self‑service инструменты для аналитики и AI, чтобы повышать эффективность процессов и качество инсайтов для пользователей
ГрейдSenior
Опытот 3 лет
Стек
PythonSparkClickHouseApache AirflowPostgreSQLApache SupersetHiveDockerKubernetes
Задачи
- •Разработка ядра системы анализа процессов и компонентов платформы
- •Проектирование и реализация ETL/ELT пайплайнов и переиспользуемых трансформаций данных
- •Разработка модели данных и витрин для аналитики
- •Создание self‑service инструментов обработки данных для пользователей
Обязательно
- •опыт работы в качестве инженера данных от 3 лет
- •опыт работы с Airflow, NiFi или другими оркестраторами ETL
- •владение SQL на высоком уровне
- •уверенное знание Python
- •опыт с Big Data стеком: ClickHouse, Spark, Hive
- •знание теории построения хранилищ данных и ООП, алгоритмов и структур данных
Будет плюсом
- •базовые навыки Unix shell
- •опыт работы с брокерами сообщений
- •опыт работы с Docker и Kubernetes
