AEAstrum Entertainment
Системный аналитик (Big Data)
Команда аналитики Big Data работает над согласованностью данных и качеством витрин для игровых продуктов. Вы будете анализировать источники, строить концептуальные и логические модели, поддерживать глоссарий и формулировать ТЗ для ETL, чтобы обеспечить корректные отчёты и метрики для бизнеса
Стек
PythonClickHouseHadoopKafkaRedisSQLBPMN
Задачи
- •Анализ источников данных (БД, REST API, файловые хранилища)
- •Формирование и поддержка единого глоссария данных
- •Построение и актуализация схем связей между данными (ER-диаграммы, маппинги)
- •Проведение root-cause analysis и формулирование решений по исправлению искажений данных
- •Участие в проектировании слоев DWH (STG, ODS, DDS, DM) с точки зрения согласованности данных
- •Формулирование технических требований (ТЗ) для ETL/ELT-разработчиков и обсуждение спецификаций с бизнесом
Обязательно
- •Понимание реляционных и нереляционных СУБД и распределённых хранилищ
- •SQL на высоком уровне
- •Знание Python для обработки и анализа данных
- •Знание Hadoop, ClickHouse, Kafka, Redis
- •Владение BPMN
- •Опыт построения логических и физических моделей, нормализация/денормализация, SCD, методологии Kimball и Data Vault
- •Умение восстанавливать связи между сущностями и системный подход к root-cause analysis
