МТСSenior Data Engineer [NEO, МТС Веб Сервисы]
гибрид, Москва
Команда MTS Web Services (MWS) развивает проект NEO в рамках MWS Cloud Platform — систему сбора, хранения, обработки и визуализации аварийных событий и метрик инфраструктуры. Роль важна для своевременного детектирования и анализа инцидентов и повышения надежности эксплуатации сети.
ГрейдSenior
Стек
PostgreSQLClickHouseApache IgniteKafkaRefreshable Materialized ViewsGrafanaGitCI/CDПартиционирование/репликация/шардирование
Задачи
- •Проектирование и разработка высоконадежного хранилища данных
- •Разработка и настройка ETL-процессов для подготовки данных
- •Оптимизация SQL-запросов и производительности хранилищ
- •Настройка и мониторинг систем и их компонентов
- •Участие в архитектурных обсуждениях и выборе решений
- •Настройка и обеспечение стабильной работы интеграций между различными системами и базами данных
Обязательно
- •Опыт работы с PostgreSQL
- •Опыт работы с ClickHouse
- •Знание движков ClickHouse
- •Опыт работы с Apache Ignite
- •Опыт работы с партиционированием, репликацией и шардированием
- •Опыт работы с Refreshable Materialized Views (обновляемыми материализованными представлениями)
- •Свободное владение SQL-функциями
