ЯндексЯндекс

Инженер данных в Автономный транспорт

офис, гибрид, Санкт-Петербург

Команда инженерии данных для Автономного транспорта. Вы будете строить и поддерживать пайплайны и хранилища для быстрой и надёжной доставки телеметрии и оперативной аналитики, чтобы команда могла своевременно принимать решения и улучшать безопасность и качество автономного вождения

ГрейдMiddle/Senior

Стек

PythonYTsaurusClickHouseKafkaSQLNirvanaLogos

Задачи

  • Разработка и поддержка пайплайнов поставки данных в околореальном времени
  • Оптимизация и повышение надёжности долговременного хранилища данных
  • Проектирование и внедрение системы бэкапов для критичных данных
  • Разработка мониторинга скорости и полноты поставки данных и визуализация метрик
  • Поддержка и развитие аналитического DWH для аналитиков и операционных сервисов

Обязательно

  • Опыт работы с Hadoop/YTsaurus/ClickHouse или другими MPP СУБД
  • Уверенное владение Python
  • Уверенное владение SQL
  • Умение писать надёжные и производительные пайплайны обработки данных
  • Приверженность инженерной культуре и использованию инструментов разработки

Будет плюсом

  • Участие в проектировании и разработке хранилищ больших данных
  • Знание или желание освоить C++
Откликнуться на сайте компании

Похожие вакансии

ЯндексЯндекс

Технический менеджер

PythonSparkHadoopSQL

Инфраструктурная аналитика и оптимизация DWH-платформы

Опыт: от 3 лет
офис, гибрид, Санкт-Петербург
ЯндексЯндекс

Разработчик интеграции Apache Spark с YTsaurus

ScalaApache SparkYTsaurusKubernetes

Интеграция Spark с YTsaurus для аналитики и batch-процессов

Опыт: от 3 лет
офис, гибрид, Екатеринбург
ЯндексЯндекс

Разработчик инфраструктуры больших данных в Автономный транспорт

GogRPCSQLOpenAPI

Платформа хранения и обработки телеметрии автопарка

Опыт: от 3 лет
офис, Санкт-Петербург
Т-БанкТ-Банк

Тимлид разработки (Java, Data)

JavaApache NiFiPostgreSQLKafka

Платформа доставки данных (NiFi / Ingest Platform)

офис, удалёнка, Санкт-Петербург
СберСбер

Системный аналитик (DWH)

PostgreSQLGreenplumApache KafkaQlikSense

Витрины и отчёты DWH для аналитики внешней торговли

Опыт: от 3 лет
гибрид, Санкт-Петербург
VKVK

Java-разработчик

Java

Пайплайны и микросервисы для контентных рекомендаций

Опыт: от 3 лет
гибрид, Санкт-Петербург

Смотреть ещё

JobsWave
Найти работу в IT