ASTONData Engineer
офис, удалёнка, гибрид
Команда Data Platform — развитие и поддержка DWH и ETL-пайплайнов для внутренних аналитических и продуктовых нужд. Роль фокусируется на создании надёжных конвейеров данных, оптимизации запросов и автоматизации оркестрации для быстрой доставки данных бизнесу
ГрейдJunior/Middle
Опытот 2 лет
Стек
PythonFastAPIPostgreSQLApache AirflowPandasClickHouseHadoopHiveSQLGitCI/CD
Задачи
- •Разработка и поддержка ETL/ELT пайплайнов и DWH
- •Оркестрация рабочих процессов в Apache Airflow
- •Оптимизация сложных SQL-запросов и оконных функций
- •Интеграция и загрузка данных из источников в хранилище
- •Поддержка процессов CI/CD и командной разработки
Обязательно
- •опыт работы в роли Data Engineer от 2 лет
- •Python, Pandas и FastAPI
- •отличные знания SQL: CTE, оконные функции, оптимизация запросов
- •опыт работы с оркестраторами — Apache Airflow
- •опыт с одной из технологий: PostgreSQL, ClickHouse, Hadoop или Hive
- •опыт работы с DWH и ETL-процессами, знание форматов XML/JSON
- •опыт командной разработки: Git, CI/CD, Confluence, Jira
