Объявления по категориям и регионам
Задать сбор можно поисковым запросом с фильтрами или целой категорией. Обычно я совмещаю: беру категорию, дроблю её по подкатегориям, районам и ценовым диапазонам и фильтрую по словам в заголовке. Дробить приходится потому, что выдача ограничена числом страниц, и без этого в таблицу попадёт только верхушка. Если запросов несколько, добавляю колонку «по какому запросу найдено»: видно, какой приносит результат, а какой можно отключить.
Параметры зависят от категории. У автомобилей это пробег и год, у квартир площадь и этаж, у одежды размер, поэтому колонки настраиваю под каждую категорию отдельно. Про недвижимость и автомобили на сайте есть отдельные страницы.
Частый заказ отслеживание новых объявлений: выгодный лот, нужная модель, квартира в определённом доме. Парсер проверяет выдачу, сверяет её со списком уже просмотренных и присылает новые ссылки на почту, в Telegram-бот или в Google-таблицу. Частоту выбираем разумную: погоня за секундами нагружает площадку и не даёт заметного выигрыша.
Цены и их динамика
Для подержанной техники, запчастей, мебели и спецтехники Авито и есть реальный рынок, поэтому на объявления смотрят перекупщики, оценщики, ломбарды и магазины. Но на доске видна цена, которую просит продавец, а не цена сделки. Поэтому для оценки беру медиану и разброс, а не среднюю: несколько завышенных объявлений её почти не сдвигают. Приманки с ценой в одну или десять тысяч, не отражающей товар, исключаю по правилам, о которых договариваемся заранее.
Точность зависит от того, насколько узко описан товар. Запрос по одному названию модели смешает разную память, состояние и комплектацию, поэтому в задаче закладываем модель, состояние, регион и границы цены. Результат: таблица с историей по датам, еженедельное письмо или подсветка объявлений ниже порога. Можно добавить колонку с вашей ценой и отклонением от медианы, для этого нужен список ваших позиций. Магазины конкурентов на Авито выгружаю отдельно и показываю динамику по их позициям.
Программа или онлайн-сервис против выгрузки под задачу
Программа ставится на ваш компьютер, вы платите за лицензию и сами настраиваете запуски. Онлайн-сервисы и расширения для браузера работают в личном кабинете с лимитами и фиксированным набором полей. Это удобно, если вы запускаете сбор сами и часто, а колонки стандартные.
Заказной парсер работает на моей стороне. Он нужен, когда колонки нестандартные, нужны расчёты вроде медианы и отклонения или отчёты должны приходить без вашего участия. Если площадка меняет страницы и сбор ломается, правлю его, условия сопровождения оговариваем при постановке задачи.
Авито активно защищается от автоматического сбора. Обход защиты не делаю и не обещаю: перед стартом проверяю, какие данные доступны, и если честным способом их не получить, говорю об этом сразу. Управление своими объявлениями, статистикой и сообщениями решает официальный интерфейс Авито для бизнеса, ему посвящена отдельная страница про API Авито. Чужие объявления через него не выгрузить.
База Авито: что под этим понимают и что я не делаю
Под базой Авито обычно имеют в виду одно из трёх, и ответ для каждого свой.
- Выгрузка объявлений категории для анализа рынка и цен. Это делаю.
- Список магазинов и компаний-продавцов в нише: название магазина, ссылка на профиль, регион, число объявлений. Тоже делаю, это сведения о бизнесе.
- Телефоны частных продавцов для обзвона. Не делаю ни в каком виде: номера физических лиц относятся к персональным данным.
Ещё одно ограничение касается контента. Фото и тексты объявлений охраняются авторским правом, поэтому наполнять ими свой магазин без разрешения нельзя. Ссылки на фото в выгрузке нужны для аналитики, сами файлы скачиваю только по отдельной договорённости.
Для оценки пришлите категорию или запрос, регионы, нужные колонки и частоту обновления. Напишите в чат своими словами задачу, в режиме диалога обсудим и определим стоимость.