Wildberries & RussData Engineer/Такси
гибрид, Москва
Команда WB Такси развивает платформу данных для сервисов клиентов, водителей и поддержки. Вы будете строить и мигрировать ETL/ELT‑пайплайны на новую платформу на базе ClickHouse, обеспечивать надежность, наблюдаемость и автоматизацию доставки данных
ГрейдJunior/Middle
Опытот 2 лет
Стек
PythonApache AirflowClickHouseKubernetesSQLDockerGitLab CICI/CD
Задачи
- •Разрабатывать и поддерживать ETL/ELT‑пайплайны для загрузки и обработки данных
- •Мигрировать процессы загрузки данных на новую data‑платформу на базе ClickHouse
- •Поддерживать и развивать инструменты оркестрации и обработки данных
- •Автоматизировать CI/CD, тестирование, развёртывание и управление конфигурациями
- •Настраивать мониторинг, логирование и алерты, участвовать в расследовании инцидентов
- •Оптимизировать надёжность и производительность пайплайнов, обеспечивать повторную обработку и восстановление
Обязательно
- •Опыт работы Data Engineer от 2 лет
- •Уверенное знание Python
- •Опыт работы с SQL и разработкой data‑пайплайнов
- •Практический опыт с Docker и Kubernetes
- •Опыт работы с оркестратором (Apache Airflow или аналог)
- •Опыт с CI/CD (GitLab CI или аналоги) и мониторингом систем
- •Опыт работы с ClickHouse или другими аналитическими СУБД
