Парсер 2ГИС и выгрузка базы организаций на заказ

Парсер 2ГИС покупают ради базы организаций города: название, рубрика, адрес, сайт, корпоративные контакты, график. Перед покупкой стоит понять, сколько работы останется на вас. Я собираю такую базу под ваш город и рубрики сам и отдаю готовый файл, а ниже разбираю, когда выгоднее программа или бесплатный скрипт.

Написать в чатОтвечаю лично, без менеджеров
vygruzka.xlsxусловный пример
AB
1СтолбецЗначение
2НазваниеООО «Пример-Строй»
3РубрикаСтроительные компании
4ГородНовосибирск
5Адресул. Примерная, 12, офис 4
6Телефон организации+7 000 000-00-00
7Сайтexample-stroy.ru
8Корпоративная почтаinfo@example-stroy.ru
9Признак сети3 филиала
10Ссылка в 2ГИС2gis.ru/…
~1200 заказоввыполнено за 2016–2026 годы
Без подробного ТЗзадачу уточняем в диалоге
xlsx, csv, xml, json, sqlформат под вашу загрузку

Купить программу, скачать скрипт или отдать задачу

Разница между вариантами не столько в цене, сколько в том, кто выполняет четыре скучные, но обязательные работы. Без любой из них база получится неполной или раздутой.

  • разделить город и рубрику на участки, чтобы выдача не обрывалась;
  • открыть каждую карточку, а не только список, иначе часть колонок останется пустой;
  • склеить филиалы и повторы одной компании в разных рубриках;
  • чинить сбор, когда справочник меняет способ отдачи данных.

Покупная программа с лицензией перекладывает все четыре работы на вас. Она окупается, если выгрузки нужны часто и есть сотрудник, готовый разбираться с настройками и проверять результат.

Бесплатный скрипт из открытого репозитория или пробная версия подходят для проверки идеи. Скрипты устаревают без предупреждения, пробные версии режут строки и поля, а онлайн-сервисы с бесплатным лимитом рассчитаны на знакомство с форматом, а не на целый город.

Заказ снимает эти работы с вас: вы получаете файл и отчёт о полноте. Коробочную программу я не продаю. Если нужна именно программа для самостоятельной работы, выбирайте среди готовых и тестируйте пробную версию на районе, который знаете.

Особенности справочника: здания, этажи, рубрики

В 2ГИС организации привязаны к зданиям, поэтому одна компания встречается столько раз, сколько у неё филиалов и рубрик, а иногда и этажей. Без склейки база распухает, а отдел продаж звонит по кругу. Группирую строки по сайту, телефону и адресу и добавляю колонку с признаком сети.

Рубрики справочника не совпадают с привычными словами. Окна ПВХ могут жить в трёх разных рубриках, поэтому список подбираем вместе: пришлите два-три примера нужных вам компаний, и я найду, где они числятся.

Заполненность карточек зависит от ниши и города. В одних рубриках сайт указан почти у всех, в других почти ни у кого. В образце показываю долю заполненных полей, чтобы вы заранее знали, чего ждать от полной выгрузки.

Лицензия 2ГИС и границы моей работы

Справочник 2ГИС охраняется как база данных: у её изготовителя есть отдельное право по Гражданскому кодексу, а лицензионные условия ограничивают извлечение и повторное использование существенной части данных. API у 2ГИС тоже есть, но, насколько я знаю его условия, он рассчитан на работу с данными внутри вашего сервиса, а не на выгрузку базы целиком. Поэтому как путь к файлу его не предлагаю.

Что я делаю: собираю общедоступные сведения о компаниях под конкретную задачу, например автосервисы двух районов для вашего отдела продаж, и до старта обсуждаю ограничения. Копию справочника для перепродажи не делаю. Юридическую оценку проекта не даю: если задача крупная, покажите её юристу.

Личные данные физических лиц в выгрузку не входят, почта только корпоративная, опубликованная самой компанией. Для рекламной рассылки по базе нужно согласие получателя по 38-ФЗ.

Как собираю базу и что вы получаете

Вы называете города, рубрики и поля. Сначала согласуем образец на небольшом числе строк, потом запускаю полный сбор, чищу дубли и отдаю файл, который открывается в Excel или загружается в CRM. Обычно в строке такие данные:

  • название и рубрики, к которым отнесена организация;
  • адрес с этажом или офисом, если он указан;
  • телефоны, почта и сайт, опубликованные самой организацией;
  • график работы и способы оплаты, где они заполнены;
  • соцсети компании и ссылка на карточку в справочнике.

Если нужна полнота по городу, могу собрать ещё и Яндекс Карты и свести обе таблицы с пометкой, где найдена каждая компания. Сводить лучше по сайту и адресу: в одном справочнике компания записана по бренду, в другом по юридическому лицу.

Для регулярного обновления настрою запуск по расписанию. Вы получаете свежий файл и разницу с прошлым: новые, закрытые и переехавшие организации. Напишите в чат своими словами задачу, в режиме диалога обсудим и определим стоимость.

Как проходит работа

  1. Вы пишете задачу в чат

    Своими словами, как есть. Подойдёт ссылка на источник и пара предложений.

  2. Обсуждаем в режиме диалога

    Проверяю, какие данные доступны и можно ли их собирать. Вместе определяем объём и стоимость.

  3. Вы получаете результат

    Готовый файл, загрузку в ваш сайт или настроенный парсер с регулярным обновлением.

Вопросы

Можно ли взять бесплатный парсер 2ГИС с GitHub?

Можно, но посмотрите дату последних изменений и открытые жалобы: если код давно не обновлялся, он, скорее всего, уже не работает. Запускайте только то, что понимаете, лучше на отдельном компьютере. И помните, что правила справочника действуют независимо от того, чем вы собираете данные.

Можно ли собрать базу 2ГИС по всей России?

Такая задача ближе к копии справочника, чем к выборке под цель, поэтому её я не беру. Предлагаю начать с регионов и рубрик, где вы реально работаете, сделать образец на одном городе и уже по нему решать, куда расширяться.

Выгружаете ли вы почту и телефоны компаний?

Только те, что организация сама указала в карточке или на своём сайте как корпоративные. Личные адреса и телефоны сотрудников не подбираю. Если почта в нише заполнена слабо, могу добрать её с сайтов компаний отдельной колонкой с указанием источника.

Как часто обновлять базу 2ГИС?

Для обзвонов хватает раза в квартал, для наблюдения за конкурентами раза в месяц. Чаще обычно мало что меняется в выбранной рубрике, а каждая новая версия всё равно требует сверки с прошлой.

Почему вы начинаете с образца, а не с целого города?

Образец показывает, какие поля в вашей рубрике реально заполнены и правильно ли подобраны рубрики. Так мы не тратим время на колонки, которые окажутся пустыми, и на компании не из вашей ниши.

Написать в чат