Data Engineer (senior) домена Ecom
удалёнка, Москва
Команда по управлению данными развивает единую платформу данных домена Ecom: вы будете проектировать модели данных, строить и поддерживать витрины и пайплайны загрузки, настраивать качество данных и помогать аналитикам — чтобы данные стали основой бизнес‑решений
ГрейдSenior
Опытот 3 лет
Стек
PythonSpark (PySpark)SQLAirflowdbtBigQuerySnowflakeClickHouseGreenplum
Задачи
- •Проектировать и разрабатывать модели данных домена по корпоративному стандарту
- •Разрабатывать и поддерживать витрины данных в dbt, участвовать в ревью моделей
- •Строить и поддерживать пайплайны загрузки: событийные данные, рекламные источники, выгрузки из внутренних систем
- •Настраивать контроли качества данных и участвовать в разборе инцидентов
- •Описывать данные в каталоге: таблицы, поля, метрики
- •Поддерживать аналитиков домена: помогать с самостоятельной сборкой витрин данных и разбирать сложные запросы
Обязательно
- •от 3 лет в разработке данных: пайплайны, витрины, аналитические хранилища
- •Уверенное владение SQL и Python, опыт промышленной разработки
- •Практика dbt: модели, тесты, документация
- •Промышленный опыт Spark (PySpark): разработка и оптимизация трансформаций
- •Опыт с оркестрацией Airflow или аналогичными инструментами
- •Понимание слоистой архитектуры хранилища и подходов к моделированию данных
Будет плюсом
- •Опыт миграции между платформами данных (BigQuery, Snowflake, ClickHouse, Greenplum)
- •Работа с событийными данными: веб‑ и мобильная аналитика, рекламные источники
- •Знание особенностей ClickHouse: движки таблиц, ключи сортировки, оптимизация
- •Опыт в ритейле или e‑commerce
- •Опыт работы в доменной модели, закреплённой за бизнес‑направлением