Data engineer (HR платформа)
Москва
Команда развивает платформу данных в блоке «Люди и Культура». Вы будете создавать и поддерживать Data-продукты в аналитическом хранилище, обеспечивая качество данных и конвейеры для HR-аналитики и ML-моделей
Стек
ClickHouseAirflowTrinoSparkSQLApache IcebergPythonLinuxBI-инструменты
Задачи
- •Проектирование и реализация ETL/ELT процессов
- •Оптимизация запросов и подходов к хранению данных
- •Разработка и поддержка моделей данных для хранилища
- •Обеспечение стабильности и мониторинга конвейеров данных
- •Внедрение процессов управления качеством данных
Обязательно
- •опыт работы с ClickHouse
- •высокий уровень SQL
- •знание методологий моделирования хранилищ данных
- •опыт проектирования моделей данных
- •опыт использования ETL-инструментов и оркестраторов (Airflow)
- •опыт построения систем контроля качества данных
Будет плюсом
- •опыт с MPP-движками, Trino, Spark
- •навыки программирования на Python
- •опыт работы с Apache Iceberg
- •опыт работы с BI-инструментами и продуктовой аналитикой
- •навыки администрирования Linux
- •опыт внедрения приложений