Data Engineer, Ozon fresh
удалёнка, Москва
Команда товародвижения в Data Science развивает систему автоматических заказов поставщикам. Вы будете готовить и оптимизировать большие данные и продуктивизировать алгоритмы, чтобы поддерживать доступность товаров и минимизировать издержки
ГрейдMiddle
Опыт1–3 года
Стек
PythonPySparkClickHouseKafkaPostgreSQLRedisMemcachedHadoopHDFSHiveAirflowDBTGitGo
Задачи
- •Разработка алгоритмов обработки больших данных
- •Исследование и подготовка данных для моделей и отчетов
- •Оптимизация вычислений и запросов
- •Продуктивизация и сопровождение алгоритмов
- •Ревью кода и анализ инцидентов
Обязательно
- •Опыт в роли Data Engineer от 2 лет
- •Высшее математическое или техническое образование
- •Уверенное владение Python и PySpark
- •Уверенное владение SQL
- •Знание устройства Hadoop, HDFS и Hive
- •Опыт работы с системами контроля версий (Git)
Будет плюсом
- •Опыт работы с Go
- •Опыт работы с Airflow
- •Опыт работы с DBT