OzonData Engineer, Ozon fresh
удалёнка, Москва
Команда товародвижения Data Science поддерживает и развивает систему автоматического заказа поставщикам для оптимального пополнения складов. Роль связана с обработкой больших данных, продуктивизацией алгоритмов и снижением издержек на хранение и списания
ГрейдJunior/Middle
Опыт1–3 года
Стек
PythonPySparkPostgreSQLKafkaClickhouseRedisMemcachedHadoopHDFSHiveAirflowDBTGitGo
Задачи
- •Писать алгоритмы обработки больших данных
- •Исследовать и подготавливать данные для моделей
- •Оптимизировать текущие вычисления и запросы
- •Продуктивизировать и сопровождать алгоритмы
- •Делать ревью кода и анализ инцидентов
Обязательно
- •Опыт в роли Data engineer от 2 лет
- •Высшее математическое или техническое образование
- •Уверенное владение Python, PySpark и SQL
- •Знание Hadoop/HDFS/Hive
- •Опыт работы с системами контроля версий (Git)
Будет плюсом
- •Опыт работы с Go
- •Опыт работы с Airflow
- •Опыт работы с DBT
