CHChoiceit
Middle / Senior Data Engineer DWH
офис, удалёнка, гибрид, Москва
Команда строит Корпоративное Хранилище Данных и data‑платформы для всего бизнеса. Вы будете разрабатывать и оптимизировать ETL/ELT-пайплайны, создавать витрины и обеспечивать качество данных для принятия решений в компании
ГрейдMiddle/Senior
Опытот 5 лет
Стек
PythonSparkGreenplumKafkaPostgreSQLDBTAirflowKubernetesTerraformAnsibleGitLabSonarQubePrometheusGrafanaAlertManager
Задачи
- •Разработка и поддержка ETL/ELT процессов в DWH
- •Организация и оптимизация data‑пайплайнов
- •Проектирование и разработка витрин данных
- •Обеспечение качества данных и мониторинг процессов
- •Настройка и сопровождение Airflow, Spark, Kafka, DBT
- •Взаимодействие с заказчиками: сбор требований и внедрение решений
Обязательно
- •Опыт работы Data Engineer от 5 лет
- •Высшее образование (IT/математика/статистика/физика)
- •Отличное знание Python и SQL
- •Опыт работы с реляционными БД (Greenplum/PostgreSQL)
- •Знание технологий обработки больших данных
- •Умение работать в команде и сильные аналитические навыки
Будет плюсом
- •Опыт работы с Airflow
- •Опыт работы со Spark
- •Опыт работы с Kafka
- •Опыт использования DBT
