ChoiceitMiddle / Senior Data Engineer DWH
Москва
Команда строит Корпоративное Хранилище Данных и data‑платформы для всего бизнеса. Вы будете развивать ETL/ELT‑пайплайны, витрины и инфраструктуру данных, чтобы обеспечить качественные аналитические данные для решений компании
ГрейдMiddle/Senior
Опытот 5 лет
Стек
PythonSparkGreenplumKafkaAirflowDBTKubernetesTerraformAnsibleGitLabSonarQubePrometheusGrafanaAlertManagerPostgreSQL
Задачи
- •Разработка и поддержка ETL/ELT‑процессов
- •Организация и оптимизация data‑пайплайнов
- •Разработка витрин данных и обеспечение качества данных
- •Настройка и сопровождение инфраструктуры (Airflow, Spark, Kafka, DBT)
- •Взаимодействие с заказчиками от сбора требований до внедрения
- •Документирование и презентация решений
Обязательно
- •опыт работы Data Engineer от 5 лет
- •высшее образование (IT/математика/статистика/физика)
- •отличное знание Python и SQL
- •опыт работы с реляционными БД (Greenplum/PostgreSQL)
- •знание современных технологий обработки больших данных
Будет плюсом
- •опыт работы с Airflow
- •опыт работы со Spark
- •опыт работы с Kafka
- •опыт работы с DBT
