СберData engineer (hadoop + java)
Москва
Команда формирует аналитические витрины для отчетности по сберегательным продуктам физлиц. Будете разрабатывать и оптимизировать процессы сборки витрин, контролировать качество данных и поддерживать кластер для задач мониторинга и запуска продуктов
Стек
JavaSparkHadoopJenkinsSQLPySparkOoziebash
Задачи
- •Проектирование и разработка аналитических витрин данных для отчетности
- •Мониторинг и оптимизация процессов сборки витрин
- •Контроль качества и валидация загружаемых данных
- •Участие в разборе инцидентов и поддержке запуска новых продуктов
- •Разработка алгоритмов построения отчетности и развитие кластера отчетности
Обязательно
- •опыт работы Data Engineer / Data Analyst / ETL Developer
- •продвинутые знания SQL (аналитические функции, подзапросы, оптимизация)
- •навыки работы с генеративными AI-моделями
- •инструментальное владение AI для анализа, генерации и автоматизации
- •опыт работы со Spark, PySpark и Java
Будет плюсом
- •опыт работы с Hadoop
- •опыт работы с Jenkins
- •знание bash
- •понимание Oozie
- •опыт создания и использования AI-агентов
- •опыт использования GigaChat, Kandinsky и аналогов
