VKGo-разработчик
гибрид, Москва
Команда OneDWH развивает единый DWH на кластерах YTsaurus и инструменты для дата-инженеров и аналитиков. Вы будете развивать платформу, оркестратор ETL и механизмы распределения/отказоустойчивости, чтобы ускорять доставку и обеспечивать доступность данных
ГрейдMiddle
Стек
GoYTsaurusPostgreSQLKafkaSparkPythonAirflowGitLab CI/CDYQL
Задачи
- •Развивать платформу DWH как продукт
- •Разрабатывать инструменты для дата‑инженеров: поиск данных, управление ETL
- •Создавать удобные инструменты для аналитиков, работающих с OneDWH
- •Работать с графами зависимостей ETL: планирование, динамическое распределение и оптимизация
- •Строить отказоустойчивые решения для критичных данных
Обязательно
- •Опыт разработки сервисов на Go
- •Уверенное владение PostgreSQL
- •Опыт работы с Kafka
- •Хорошее знание алгоритмов и структур данных, особенно графовых
Будет плюсом
- •Знакомство с Java, Python, Spark или YTsaurus
- •Опыт в DWH, ETL или дата‑инженерии
- •Опыт работы с Airflow
- •Опыт настройки CI/CD-пайплайнов (GitLab или другая система)
- •Готовность тесно работать с дата‑инженерами и аналитиками
