МагнитВедущий разработчик Clickhouse
Команда поддерживает аналитические пайплайны и хранилища; вы будете оптимизировать бизнес-логику и запросы в ClickHouse/Teradata и настраивать потоковые ETL/валидацию данных, чтобы ускорять получение аналитики для бизнеса
ГрейдLead
Опыт1–3 года
Стек
PythonAirflowClickHouseTeradataPostgreSQLGreenplumOracleS3
Задачи
- •Реализовывать и оптимизировать сложную бизнес-логику в ClickHouse и Teradata
- •Проводить ad-hoc анализ, исследование и валидацию данных
- •Настраивать и поддерживать ETL-процессы для ClickHouse и других хранилищ
- •Организовывать оркестрацию процессов и DAG'и в Airflow
- •Оптимизировать запросы и настройки кластера для повышения производительности
Обязательно
- •Экспертное знание ClickHouse
- •Опыт работы не менее 2 лет
- •Глубокое понимание принципов работы и оптимизации ClickHouse
- •Умение реализовывать и оптимизировать сложную бизнес-логику в аналитических хранилищах
- •Опыт проведения ad-hoc анализа и валидации данных
Будет плюсом
- •Опыт работы с Teradata, PostgreSQL, Greenplum
- •Опыт настройки ETL и работы с Airflow и Python
- •Опыт настройки сложных DAG'ов с обработкой ошибок и уведомлениями
- •Понимание принципов оптимизации SQL-запросов
