Мы развиваем B2B‑платформу для профессионалов винной индустрии в 35+ странах и ищем надежного подрядчика для долгосрочного сотрудничества. Наша цель - построить и поддерживать систему сбора данных, которая ежедневно обновляет цены на вино и наличие товара у онлайн‑ритейлеров по всему миру.
Формат работы
-
Долгосрочный проект с регулярным потоком задач (каждую неделю есть работа).
-
Полностью удаленная работа, гибкий график.
-
Оплата по согласованной ставке - за каждую партию сайт.
-
Работа напрямую с техлидом и продактом, без бюрократии.
Основные задачи
-
Поддержка и оптимизация существующих Scrapy‑пауков и конфигураций.
-
Разработка новых парсеров под интернет‑магазины в разных странах.
-
Использование XPath/CSS‑селекторов и регулярных выражений для извлечения данных.
-
Диагностика и исправление падений/ошибок парсеров при изменении верстки сайтов.
-
Тесное взаимодействие с отделом по управлению данными по вопросам качества данных и приоритета задач.
Наш стек
-
Python 3.10+
-
Scrapy (обязательно)
-
Дополнительно приветствуется опыт с: BeautifulSoup, lxml, Selenium, Playwright.
-
Git, Linux, базовые знания SQL будут плюсом.
Требования
-
Уверенный Python 3 (чтение чужого кода, рефакторинг, написание чистых модулей).
-
Опыт коммерческой разработки парсеров / краулеров (желательно Scrapy) от 1 года.
-
Понимание принципов устойчивого парсинга: обработка ошибок, таймаутов, капчей, редиректов, пагинации.
-
Уверенная работа с XPath и CSS‑селекторами.
-
Аккуратное отношение к данным, внимательность к деталям.
-
Базовый английский для чтения документации и названий полей; общение в команде - на русском.
Что предлагаем
-
Долгосрочное сотрудничество, постоянный поток задач, понятный бэклог.
-
Адекватные сроки и ожидания, без «горящих» ночных дедлайнов.
-
Возможность влиять на архитектуру системы парсинга.
-
Работа с интересным доменом (винная индустрия, e‑commerce, ценообразование).
Процесс отбора
-
Небольшое практическое тестовое задание, чтобы оценить подход к парсингу и качество кода.
-
По итогам теста - краткое знакомство по переписке или звонку.
-
Далее пробный оплачиваемый период и далее долгосрочное сотрудничество при взаимном интересе.
Тестовое задание
Для сайта нужно реализовать Scrapy‑паука, который обходит сайт и собирает только карточки винных товаров.
Пауку необходимо:
-
Начинать обход с главной страницы, каталога или sitemap (на твой выбор).
-
Находить и переходить по всем (!) ссылкам на карточки винных товаров.
-
Для каждой карточки вина формировать JSON‑объект со следующими полями:
-
название вина;
-
винтаж (год);
-
наличие (в наличии / нет);
-
URL основной картинки товара;
-
цена и валюта;
-
объем бутылки (например, 375ml, 750ml, 1500ml);
-
количество бутылок (минимальный/стандартный размер заказа, если указано).
-
Ожидаемый результат:
-
Код Scrapy‑проекта (spider, items/pipelines при необходимости) в архиве или ссылкой на репозиторий.
-
Инструкция, как запустить паука и получить JSON‑выгрузку (README или описание в отклике).
-
Краткий комментарий, какие сложности встретились и как они решены (структура сайта, пагинация, фильтры и т.д.).
Как откликнуться
В отклике, пожалуйста, укажите:
-
Кратко о своём опыте с веб‑парсингом (какие сайты/домены, какой стек).
-
Примеры реализованных проектов (GitHub, описания, скриншоты) - без раскрытия чужих коммерческих тайн.
-
Ссылку или архив с решением тестового задания.
-
Какие технологии из стека выше вы используете в работе.
-
Желаемую почасовую ставку и ориентировочную загрузку (часов в неделю).
