Инженер данных в Автономный транспорт
офис, гибрид, Санкт-Петербург
Команда инженерии данных для Автономного транспорта. Вы будете строить и поддерживать пайплайны и хранилища для быстрой и надёжной доставки телеметрии и оперативной аналитики, чтобы команда могла своевременно принимать решения и улучшать безопасность и качество автономного вождения
ГрейдMiddle/Senior
Стек
PythonYTsaurusClickHouseKafkaSQLNirvanaLogos
Задачи
- •Разработка и поддержка пайплайнов поставки данных в околореальном времени
- •Оптимизация и повышение надёжности долговременного хранилища данных
- •Проектирование и внедрение системы бэкапов для критичных данных
- •Разработка мониторинга скорости и полноты поставки данных и визуализация метрик
- •Поддержка и развитие аналитического DWH для аналитиков и операционных сервисов
Обязательно
- •Опыт работы с Hadoop/YTsaurus/ClickHouse или другими MPP СУБД
- •Уверенное владение Python
- •Уверенное владение SQL
- •Умение писать надёжные и производительные пайплайны обработки данных
- •Приверженность инженерной культуре и использованию инструментов разработки
Будет плюсом
- •Участие в проектировании и разработке хранилищ больших данных
- •Знание или желание освоить C++