Инженер данных
гибрид, Москва
Команда цифровых трансформаций развивает корпоративную дата‑платформу и инженерную экосистему для надежной доставки данных продуктовым командам. Роль фокусируется на разработке ETL/ELT‑пайплайнов, интеграции источников и повышении надежности платформы
Стек
PythonApache AirflowApache SparkSQL
Задачи
- •Разработка и оптимизация пайплайнов обработки данных
- •Интеграция новых источников в Data Lake
- •Развитие и внедрение фреймворков и практик инженерии данных
- •Проведение код‑ревью и поддержка качества кода
- •Участие в развитии инфраструктуры данных и стандартов разработки
Обязательно
- •Высшее образование
- •Опыт разработки пайплайнов в Apache Airflow
- •Практический опыт оптимизации Spark‑приложений
- •Понимание работы СУБД и принципов построения хранилищ данных
- •Уверенное владение SQL
- •Уверенное владение Python