Wildberries & RussDBA Платформа
удалёнка
Команда Платформа данных развивает Hadoop-инфраструктуру маркетплейса: кластеры, пайплайны и сервисы для хранения и обработки данных. Роль важна для доступности, производительности и надежности централизованной дата-структуры компании.
ГрейдSenior
Стек
HadoopHDFSSparkYARNIcebergTrinoKerberosTLSPrometheusGrafanaLinuxAnsible
Задачи
- •Администрировать и развивать Hadoop-кластеры объёмом 7.5 PB NVMe
- •Обеспечивать отказоустойчивость и доступность сервисов (HA, Active/Standby)
- •Проводить мониторинг, алертинг и анализ инцидентов
- •Оптимизировать производительность кластера и сервисов
- •Автоматизировать рутинные операции и скрипты
- •Вести документацию: runbooks и инструкции
Обязательно
- •Опыт администрирования Linux (systemd, сети, диски, RAID/LVM)
- •Практический опыт работы с Hadoop: HDFS, YARN, Iceberg, Spark
- •Понимание высокодоступных решений (HA, Active/Standby)
- •Опыт настройки Kerberos и TLS
- •Навыки диагностики производительности (top, iostat, vmstat, tcpdump, flamegraph)
- •Опыт работы с мониторингом (Prometheus/Grafana или аналоги)
