OzonSQL разработчик
удалёнка, гибрид, Москва
Работа в команде над обработкой и анализом больших объёмов данных и созданием надёжных ETL/CI/CD пайплайнов. Вы будете оптимизировать SQL-запросы, настраивать автоматизацию на Airflow/GitLab и улучшать аналитические решения для бизнеса
Стек
PythonAirflowClickHouseGitLabVerticaHadoopPostgreSQLMS SQLKafkaDockerKubernetesSpark
Задачи
- •обработка и анализ наборов данных (>10 млрд строк)
- •проектирование и оптимизация SQL-запросов и колонковых хранилищ
- •настройка и поддержка ETL-процессов
- •внедрение и поддержка CI/CD пайплайнов в GitLab
- •анализ данных для выявления слабых зон и модернизации бизнес-решений
Обязательно
- •уверенное владение SQL (MS SQL/PostgreSQL/колоночные СУБД)
- •опыт работы с Python
- •знание основ реляционных и колонковых баз данных
- •понимание принципов бизнес-анализа и проектирования баз данных
- •умение выстраивать ETL-пайплайны
- •умение работать в команде
Будет плюсом
- •опыт работы с Kafka
- •администрирование баз данных
- •умение работать с Docker и Kubernetes
- •знание Spark
