Чем мониторинг отличается от разового сбора
Разовый срез отвечает на вопрос, сколько стоит сейчас. Мониторинг отвечает на другие: когда цена менялась, как часто, на сколько и что делали остальные в день распродажи. Для этого парсер работает по расписанию, а результаты складываются в одно хранилище с датой каждого замера.
Подходит магазинам, дистрибьюторам и производителям, которым важна динамика: увидеть, что конкурент держит акцию третью неделю или что весь рынок поднял цены, а вы нет. Если нужен только один срез, это разовый парсинг цен. Контроль минимальной цены у дилеров вынесен на страницу про мониторинг РРЦ.
Сопоставление ваших товаров с товарами конкурентов
Собрать цены с сайта конкурента несложно. Сложнее понять, какой его товар соответствует вашему: названия у магазинов разные, а общего артикула может не быть. Поэтому основная часть первой настройки это сопоставление.
Лучший ключ это артикул производителя, штрихкод или модель. Когда их нет, сравниваю бренд, название и характеристики, а спорные пары выношу на отдельный лист для вашей проверки. Подтверждённая связка сохраняется, и при следующих замерах разбираться заново не нужно. Новые товары конкурента попадают в список на сопоставление, а не теряются.
Расписание, история и контроль работы парсера
Парсер запускается на сервере: раз в сутки, несколько раз в день или по выбранным дням. Новые замеры добавляются в базу, не затирая старые, и по каждой позиции видна история с датами.
Отдельная задача это контроль самого парсера. Сайты меняют вёрстку, и однажды значения начнут приходить пустыми. Я добавляю проверки: если доля пустых строк выше обычной или резко упало число товаров, вам приходит сообщение, а не тихо неверный отчёт.
- расписание под частоту изменений в вашей нише;
- история цен и наличия по каждой позиции;
- уведомление, если источник изменился и данные перестали собираться;
- отчёт в xlsx, письмом, в Google Таблицу или в вашу базу.
Отчёт: разница с рынком и отклонения
В одной строке стоят ваш товар, ваша цена, цены каждого выбранного конкурента, разница в рублях и процентах и признак, кто дешевле. Сводный лист показывает, по скольким позициям вы дороже рынка, по скольким дешевле и в каких категориях разрыв больше всего.
Отклонения задаются порогом: показать товары, где конкурент дешевле вас больше заданного процента, или где цена изменилась с прошлого замера. История помогает отличить разовую акцию от нового уровня цен.
- минимальная цена по рынку и у кого она;
- товары, которых у конкурента нет, и наоборот;
- наличие и срок доставки у конкурента, если они указаны;
- динамика разницы за выбранный период.
Какие цены и источники учитывать
Цена на странице не всегда одна: по карте клиента, оптовые ступени, акционная с таймером, зависящая от выбранного города или подгружаемая скриптом после открытия страницы. Регион и тип цены фиксируем заранее, иначе сравнение будет некорректным. У товаров с вариантами беру цену каждого размера или комплектации, а не «цену от».
Отслеживать можно интернет-магазины, оптовые сайты, прайс-листы в xls и pdf на сайтах поставщиков, карточки на маркетплейсах, включая Яндекс Маркет. На маркетплейсе цена зависит от продавца, региона и скидок площадки, поэтому заранее решаем, что брать. Если у источника есть фид, использую его. Обход защиты от автоматических запросов не делаю: если доступ закрыт, ищем другой законный путь.
Для начала пришлите выгрузку своих товаров с артикулами, список конкурентов, регион и нужную частоту. Напишите в чат своими словами задачу, в режиме диалога обсудим и определим стоимость.