Wildberries & RussИнженер данных
офис, гибрид, Москва
Команда строит прикладной слой витрин поверх Trino/ClickHouse для дашбордов и аналитики. Вы будете развивать ETL-пайплайны и DAG‑и в Airflow, следить за качеством данных и работать в связке с владельцем DWH и аналитиками
Стек
PythonAirflowClickHouseTrinopandasdbtGitLabDockerSparkExcel
Задачи
- •Проектировать и поддерживать прикладные витрины данных на Trino/ClickHouse
- •Разрабатывать и поддерживать ETL-пайплайны и DAG‑и в Airflow
- •Чистить, дедуплицировать и контролировать качество данных витрин
- •Настраивать алертинг и реагировать на проблемы данных
- •Вести код в GitLab: ветки, мерж‑реквесты, ревью
- •Сотрудничать с владельцем DWH и бизнес‑аналитиками, строить прикладной слой поверх данных
Обязательно
- •Продвинутый SQL (оконные функции, CTE, оптимизация запросов)
- •Опыт работы с Trino/Presto/ClickHouse
- •Умение разрабатывать ETL на Python (pandas, работа с API)
- •Опыт разработки и поддержки DAG‑ов в Airflow
- •Навыки работы с GitLab (ветки, мерж‑реквесты, ревью)
- •Понимание инфраструктуры: Docker, поддержка БД, умение читать код Spark
- •Опыт в retail/e‑commerce/FMCG/beauty и работа с мастер‑данными
Будет плюсом
- •Опыт трансформаций с dbt или аналогами
- •Опыт работы с BI-системами и визуализацией данных
