Data Engineer в платформенную команду
удалёнка, гибрид, Москва
Платформенная команда, которая развивает базовый слой данных и сервисы для аналитики и интеграций. Работать будете над витринами, интеграциями и инфраструктурой big data, обеспечивая качество данных для внутренних потребителей и бизнес‑команд.
ГрейдMiddle/Senior
Стек
PythonAirflowPostgreSQLKafkaTrinoGreenplumClickHouseRabbitMQGoKubernetesSuperset
Задачи
- •Проектирование и разработка базового слоя витрин данных с SQL и Python
- •Оптимизация и повышение производительности SQL-запросов
- •Развитие и поддержка интеграций с сервисами и командами в микросервисной архитектуре
- •Участие в развитии инфраструктурных решений для работы с big data
- •Поддержание качества кода и улучшение процессов в команде
Обязательно
- •экспертное владение SQL
- •продвинутый уровень Python
- •навык оптимизации и профилирования запросов
- •понимание PostgreSQL, Greenplum и ClickHouse
- •знание архитектуры данных и принципов построения витрин
- •опыт работы с большими объёмами данных
Будет плюсом
- •опыт работы с Airflow
- •знание Trino
- •опыт с Superset
- •опыт работы с Kubernetes
- •опыт построения аналитического хранилища данных