VKСтарший дата-инженер / DWH-инженер
офис, Москва
Команда развивает многослойный DWH на YTsaurus и сопутствующие дата‑продукты: трансформации, оркестрация, мониторинг качества и API для аналитиков и продуктовых команд. Работа обеспечивает своевременные и качественные данные для принятия решений
ГрейдSenior
Стек
PythonYQLYTsaurusCI/CDSQLAPI
Задачи
- •Проектировать и писать сервисы и API для DWH
- •Развивать и оптимизировать трансформации на YQL и Python
- •Проектировать и поддерживать модели данных по слоям хранилища
- •Поддерживать и расширять оркестрацию пайплайнов и планировщик workflow
- •Развивать мониторинг качества данных и реагировать на инциденты
- •Участвовать в code review и поддерживать инженерную планку команды
Обязательно
- •Уверенный Python для production‑сервисов
- •Крепкий SQL и оптимизация аналитических запросов
- •Опыт проектирования и поддержки бэкенд‑сервисов / API / интеграций
- •Понимание слоёного DWH: raw→ods→dds→cdm, инкрементальная загрузка, партиционирование
- •Внимание к качеству данных и соглашениям об именовании и технических полях
