Старший инженер данных (Senior+/Lead)
удалёнка
Команда в крупном банке развивает промышленный DWH и ETL/ELT-пайплайны для обеспечения качества данных и доступности витрин для BI и бизнес‑аналитики. Роль фокусируется на архитектуре, масштабировании, надежности загрузок и инженерных стандартах платформы данных.
ГрейдSenior/Lead
Опыт6+ лет
Стек
PythonApache SparkGreenplumAirflowKafkaPower BIOpenMetadataGitLabGit
Задачи
- •Проектирование архитектуры и стратегий развития хранилища данных
- •Разработка и сопровождение ETL/ELT-пайплайнов и шаблонов переиспользуемых фреймворков
- •Управление инженерными проектами по модернизации, миграции и оптимизации производительности
- •Руководство и развитие команды инженеров данных, распределение ответственности
- •Взаимодействие с бизнесом и стейкхолдерами для трансформации требований в инженерную дорожную карту
- •Внедрение стандартов качества, мониторинга и практик управления техническим долгом
Обязательно
- •Опыт построения и масштабирования DWH и ETL/ELT не менее 7 лет
- •Не менее 3 лет в роли технического лидера/ведущего инженера или руководителя
- •Глубокое владение Greenplum и оптимизацией под большие объёмы
- •Экспертное владение Data Vault 2.0 и проектированием слоёв КХД
- •Глубокое владение Apache Spark и оптимизацией кластерных пайплайнов
- •Опыт разработки переиспользуемых фреймворков на Python и Java
- •Опыт управления командой инженеров данных и подрядчиками
Будет плюсом
- •Опыт работы с OpenMetadata или другими каталогами данных
- •Опыт настройки наблюдаемости загрузок и алертинга
- •Опыт формирования инженерного сообщества и распространения практик
- •Понимание и согласование SLA/SLO с бизнесом