VKVK

Старший дата-инженер / DWH-инженер

Санкт-Петербург

Команда данных стримингового сервиса VK Музыка. Будете мигрировать DWH в целевую архитектуру, реализовывать и систематизировать ETL-процессы и оптимизировать работу с данными для продуктовой аналитики и отчетности.

ГрейдSenior
Опыт4+ года

Стек

PythonAirflowClickHouseSQL

Задачи

  • Миграция в целевую архитектуру данных
  • Реализация и систематизация ETL-процессов
  • Оптимизация работы с данными для продуктовой аналитики
  • Документирование данных и процессов управления данными

Обязательно

  • Опыт разработки на Python и SQL
  • Опыт работы с Airflow
  • Опыт работы с ClickHouse
  • Опыт создания ETL-процессов
  • Опыт миграции данных между разными СУБД
  • Опыт построения архитектуры DWH объёмом 100+ TB
  • Опыт работы в data engineering не менее 4 лет

Будет плюсом

  • Опыт работы с YTsaurus
Откликнуться на сайте компании

Похожие вакансии

ЯндексЯндекс

Технический менеджер

PythonSparkHadoopSQL

Инфраструктурная аналитика и оптимизация DWH-платформы

Опыт: от 3 лет
офис, гибрид, Санкт-Петербург
ЯндексЯндекс

Разработчик интеграции Apache Spark с YTsaurus

ScalaApache SparkYTsaurusKubernetes

Интеграция Spark с YTsaurus для аналитики и batch-процессов

Опыт: от 3 лет
офис, гибрид, Екатеринбург
ЯндексЯндекс

Разработчик инфраструктуры больших данных в Автономный транспорт

GogRPCSQLOpenAPI

Платформа хранения и обработки телеметрии автопарка

Опыт: от 3 лет
офис, Санкт-Петербург
Т-БанкТ-Банк

Тимлид разработки (Java, Data)

JavaApache NiFiPostgreSQLKafka

Платформа доставки данных (NiFi / Ingest Platform)

офис, удалёнка, Санкт-Петербург
ЯндексЯндекс

Инженер данных в Автономный транспорт

PythonYTsaurusClickHouseKafka

Сервисы поставки и обработки телеметрии автономного флота

офис, гибрид, Санкт-Петербург
СберСбер

Системный аналитик (DWH)

PostgreSQLGreenplumApache KafkaQlikSense

Витрины и отчёты DWH для аналитики внешней торговли

Опыт: от 3 лет
гибрид, Санкт-Петербург

Смотреть ещё

JobsWave
Найти работу в IT