ЯндексСтарший инженер данных в Meta DWH
офис, гибрид, Санкт-Петербург
Команда занимается аналитикой и инфраструктурой больших вычислительных кластеров и данных, обеспечивает корпоративные витрины и Data Governance. Роль подразумевает проектирование масштабируемых ETL/витрин, оптимизацию потребления ресурсов и формирование технической стратегии для повышения эффективности бизнеса
ГрейдSenior
Опытот 3 лет
Стек
PythonSparkHadoopSQLDataCatalogDWH
Задачи
- •Анализ и оптимизация работы вычислительных кластеров с миллионами CPU и петабайтами RAM
- •Проектирование и реализация масштабируемых витрин данных
- •Создание инструментов для анализа потребления ресурсов и повышения эффективности
- •Улучшение и подготовка данных для сервисов Data Governance и DataCatalog
- •Участие в формировании технической стратегии и роадмапа аналитической платформы
Обязательно
- •Опыт на позиции старшего разработчика, дата‑инженера или тимлида от 3 лет
- •Глубокие знания построения и эксплуатации DWH и аналитических платформ
- •Опыт работы с большими данными: Hadoop, Spark, SQL, Python
- •Умение анализировать сложную инфраструктуру и предлагать масштабируемые решения
- •Навыки ведения команды и принятия технических решений на стыке технологий и бизнеса
- •Ответственность за влияние решений на работу компании
Будет плюсом
- •Опыт работы с корпоративными инструментами Data Governance и DataCatalog
- •Участие в разработке долгосрочных архитектурных решений и оценке инвестиций
