Как устроены онлайн-каталоги Садовода
Садовод это огромный оптовый рынок, и в интернете он представлен не одним сайтом, а несколькими каталогами и приложениями. Каждый показывает товары своих продавцов в собственной структуре. Где-то цена указана за штуку, где-то за размерный ряд, где-то за упаковку, и это главная ловушка для сводной таблицы.
Перед работой я смотрю, какой именно каталог вам нужен, и привожу цены к единой единице: за штуку или за ряд, как вам удобнее.
Какие данные собираю
Главная ценность выгрузки в свежести. Оптовые цены и наличие меняются чаще, чем розничные, а пропавший размер делает позицию бесполезной.
- название, категория, артикул продавца
- цена за штуку, за ряд или за упаковку
- размеры и цвета с признаком наличия
- состав, фото, описание
- продавец и расположение на рынке, если оно указано публично
Подводные камни и права
Фото на рынке снимают сами продавцы, и права на них принадлежат им. Выкладывать их в свой магазин без разрешения нельзя. Самый чистый путь это договориться с продавцом о фото и приложить к парсингу данных его согласие. Без этого могу собрать только цены, размеры и характеристики для вашего анализа.
Контакты продавцов-физлиц не собираю. Беру общедоступные данные компаний и то, что опубликовано в карточках товара.
Каталоги часто подгружают список скриптом и листают постранично. Я работаю с динамическими страницами и пагинацией, а перед стартом проверяю доступность данных и правила площадки.
Куда загрузить результат
Таблицу отдаю в Excel или CSV, а для магазина готовлю файл под импорт вашей CMS: OpenCart, PrestaShop, WordPress, 1С-Битрикс и других. Загрузить сам могу по временному доступу, лучше на копии сайта. Для постоянной работы настрою автоматический парсер, который обновляет цены и наличие по расписанию.
Для оценки пришлите ссылку на каталог или продавца, категории и частоту обновления. Если товары поставщика лежат только в группе ВКонтакте, это отдельная задача, она описана на странице про поставщиков Садовода в ВК.