Wildberries & RussData analyst / Аналитик-разработчик (ПВЗ)
гибрид, Москва
Команда разработки собирает и поддерживает высоконагруженные парсеры и краулеры для сбора данных с веб‑сайтов. Роль важна для получения структурированных данных для аналитики и бизнес‑решений — вы будете улучшать надёжность и масштабируемость пайплайнов сбора
ГрейдJunior/Middle
Опытот 1 года
Стек
PythonScrapyrequestsSeleniumhttpxaiohttpBeautifulSouplxml
Задачи
- •Разрабатывать и поддерживать парсеры и краулеры для сайтов
- •Обходить анти‑бот системы и CAPTCHA
- •Организовать и управлять прокси‑инфраструктурой (ротация, выбор типа, борьба с блокировками)
- •Оптимизировать производительность и надёжность пайплайнов сбора данных
- •Структурировать и очищать собранные данные
Обязательно
- •Опыт разработки парсеров на Python от 1 года
- •Глубокое понимание HTTP/S: headers, cookies, сессии
- •Опыт обхода анти‑бот систем и CAPTCHA
- •Опыт работы с прокси (HTTP(S), SOCKS) и сервисами их предоставления
- •Знание библиотек requests, httpx, aiohttp, BeautifulSoup, lxml, Scrapy, Selenium, Playwright
- •Умение работать с headless‑браузерами
Будет плюсом
- •Опыт работы с распределёнными прокси (Bright Data, Oxylabs, SOAX)
- •Навыки reverse engineering мобильных приложений или JS‑кода
- •Опыт с системами очередей и распределёнными системами (Redis, RabbitMQ)
- •Знание Docker для контейнеризации парсеров
