Инженер данных в команду высокоточных цифровых дорожных карт
Москва
Команда создает пайплайны и платформу данных для высокоточных цифровых дорожных карт и системы автономного вождения; задача — обеспечить качественные данные для ML и снизить стоимость и время обработки
ГрейдMiddle/Senior
Опытот 4 лет
Стек
PythonApache SparkSQLAirflowRayDagster
Задачи
- •Разрабатывать и поддерживать пайплайны обработки логов и данных для HD‑карт
- •Участвовать в проектировании и реализации платформы данных для машинного обучения
- •Проектировать и реализовывать слой хранения и доступа к данным
- •Оптимизировать пайплайны и инфраструктуру для ускорения обработки и снижения стоимости
Обязательно
- •Промышленный опыт на Python от 4-х лет
- •Хорошее знание SQL (джойны и оконные функции)
- •Практический опыт с Apache Spark или Ray
- •Практический опыт с Airflow или Dagster