СберData engineer (с разговорным английским)
офис, Москва
Команда разрабатывает Early Warning System для автоматического обнаружения негативных тенденций у контрагентов. Роль предполагает создание и поддержку хранилищ и ETL-процессов для больших данных, чтобы обеспечить своевременный мониторинг и поддержку принятия решений в банке
Стек
SparkPostgreSQLKafkaHadoopScalaPythonJavaSQL
Задачи
- •Проектирование и разработка инфраструктуры для хранения и обработки больших данных
- •Проектирование и настройка ETL-процессов из внутренних и внешних источников
- •Подготовка аналитических выгрузок и данных для заказчиков
- •Создание и оптимизация SQL-скриптов для PostgreSQL
Обязательно
- •Знание английского на разговорном уровне
- •Отличное знание SQL
- •Знание Scala или Python
- •Опыт работы с большими данными: Hadoop, Spark, Kafka
- •Понимание алгоритмов и структур данных
- •Знание принципов проектирования баз данных
- •Опыт работы с PostgreSQL и оптимизация запросов
Будет плюсом
- •Знание Java
