СберData engenier
Москва
Команда строит и поддерживает витрины данных для блока управления благосостоянием. Вы будете разрабатывать ETL/ELT‑пайплайны и потоковую обработку, чтобы обеспечить актуальные аналитические данные и улучшить финансовые сервисы для миллионов клиентов.
Стек
SparkHadoopKafkaSQLFlinkTeradataGreenPlumOracleSAP HANAQlikGitCI/CD
Задачи
- •Разработка потоков данных и витрин на Hadoop
- •Проектирование и поддержка ETL/ELT‑процессов
- •Написание трансформаций на Spark и SQL
- •Реализация потоковой обработки с Kafka/Flink
- •Интеграция источников данных и проектирование физической модели витрин
- •Настройка мониторинга витрин и оперативное устранение инцидентов
Обязательно
- •Опыт реализации систем обработки данных и хранилищ данных
- •Уверенные знания SQL и опыт работы с СУБД
- •Опыт проектирования баз данных и ETL‑потоков
- •Опыт работы с Hadoop‑экосистемой или другими стеками обработки данных
- •Опыт работы с Kafka
- •Умение готовить технические задания и взаимодействовать с бизнес‑заказчиком
