Разработчик DE (CDH DC)
Москва
Команда работает над системой выявления сомнительных операций (ПОД/ФТ). Вы будете развивать пайплайны данных, витрины и репликацию результатов обработки для аналитики и интеграций между модулями, обеспечивая стабильность процессов в продовой среде
ГрейдMiddle/Senior
Опытот 3 лет
Стек
PythonSparkHiveHadoopSQLHBaseGitJiraLinux
Задачи
- •репликация и распространение обработанных данных
- •внедрение и деплой моделей в рабочие пайплайны
- •построение специальных витрин данных для потребителей
- •разработка пакетных ETL/обработок и обеспечение их надежности
- •разбор инцидентов и поддержка процессов в промышленных средах
Обязательно
- •уверенное знание SQL и написание сложных запросов
- •владение Python
- •опыт разработки автоматизированных систем от 3 лет
- •опыт разбора инцидентов и дефектов в продакшне
- •навыки работы с системами управления изменениями и версиями (Jira, Git)
- •развитые коммуникационные навыки
Будет плюсом
- •опыт разработки ETL-процессов
- •опыт работы с Big data
- •опыт работы с Hadoop, Hive, Spark, HBase
- •навыки работы с Linux
- •опыт создания и использования AI-агентов
- •знание Java
- •знание математической статистики