ASTONData Engineer
офис, удалёнка, гибрид
В команду Data Platform ищут Data Engineer для разработки и поддержки ETL‑пайплайнов и DWH. Будете строить и оптимизировать каналы данных, ускорять аналитические запросы и обеспечивать качество данных для бизнес‑отчетности и ML
ГрейдJunior/Middle
Опыт1–3 года
Стек
PythonFastAPIPostgreSQLApache AirflowPandasClickHouseHadoopHiveSQLGitCI/CDXMLJSONDWHETLConfluenceJira
Задачи
- •разработка и поддержка ETL‑пайплайнов
- •проектирование и оптимизация DWH и аналитических запросов
- •автоматизация оркестрации задач в Apache Airflow
- •разработка сервисов и API для работы с данными
- •поддержка качества данных и форматов XML/JSON
- •совместная работа в командной среде с использованием Git и CI/CD
Обязательно
- •опыт работы в роли Data Engineer от 2-х лет
- •профессиональное владение Python, опыт с Pandas и FastAPI
- •отличные знания SQL (CTE, оконные функции, оптимизация запросов)
- •опыт работы с оркестраторами (Apache Airflow)
- •опыт с одной из технологий: PostgreSQL, ClickHouse, Hadoop или Hive
- •опыт работы с DWH и ETL‑процессами
- •опыт командной разработки: Git, CI/CD, Confluence, Jira
