Data Engineer (senior) домена Ecom
офис, удалёнка, гибрид, Москва
Команда развивает единую платформу данных для принятия бизнес‑решений в e‑commerce: вы будете проектировать модели данных, создавать и поддерживать витрины и пайплайны, внедрять контроли качества и помогать аналитикам для улучшения отчетности и принятия решений
ГрейдSenior
Опытот 3 лет
Стек
PythonPySparkdbtAirflowSQLClickHouseBigQuerySnowflakeGreenplum
Задачи
- •Проектирование и разработка моделей данных домена по единому стандарту компании
- •Разработка и поддержка витрин данных в dbt, участие в ревью моделей
- •Построение и поддержка пайплайнов загрузки: событийные данные, рекламные источники, выгрузки из внутренних систем
- •Настройка контролей качества данных и участие в разборе инцидентов
- •Документирование данных в каталоге: таблицы, поля, метрики
- •Поддержка аналитиков домена и помощь в разборе сложных запросов
Обязательно
- •От 3 лет в разработке данных: пайплайны, витрины, аналитические хранилища
- •Уверенный SQL и Python, опыт промышленной разработки
- •Практика dbt: модели, тесты, документация
- •Промышленный опыт Spark (PySpark): разработка и оптимизация трансформаций
- •Опыт с оркестрацией (Airflow или аналог)
- •Понимание слоистой архитектуры хранилища и подходов к моделированию данных
Будет плюсом
- •Опыт миграции между платформами данных (BigQuery, Snowflake, ClickHouse, Greenplum)
- •Опыт работы с событийными данными: веб- и мобильная аналитика, рекламные источники
- •Знание особенностей ClickHouse: движки таблиц, ключи сортировки, оптимизация
- •Опыт в ритейле или e‑commerce
- •Опыт работы в доменной модели с закреплением инженера за бизнес‑направлением