2gis-парсер

Категория: Импорт данных в каталог

2GIS парсер для каталога фирм

Модуль для сбора фирм с крупнейшего портала организаций 2gis.ru. 2гис – это огромный справочник предприятий содержащий более 2 миллионов фирм в 100 крупнейших городах России, Украины и Казахстана.
Для сбора фирм осуществлен удобный функционал из админки каталога.

 

Сбор осуществляется тремя возможными способами:
- через API c с помощью ключа
- напрямую с помощью клиентской библиотеки php Curl

- напрямую с помощью клиентской библиотеки php Curl, через прокси-сервер

 

 

 

 

 

Возможности модуля

При сборе последовательно указывается город, рубрика и подрубрика в каталоге 2gis.ru, после чего можно указать страну/город, область, категории собственного каталога организаций. Затем запустить процесс на стадии тестирования или импорта. Процесс отключается во время сбора, если сбор не обнаружит необходимого ответа при получении ссылок на профиле фирмы и количество фирм. Причиной откючения процесса может служить сбой в работе прокси-сервера, сбой на сайте 2гис, либо блокировка по ip. Режим блокировки можно обойти используя прокси.
В настройках прокси указывается ip и порт, а также логин и пароль при использовании элитных прокси. Не рекомендуется использовать прокси, если у Вас есть все возможности собирать данные без него, так как это существенно нагрузит сервер, а сбои в работе прокси могут привести к неожиданным результатам: некоторые организации могут быть не собраны, либо собраны повторно. Вследствие этого если уж Вы используете прокси, то используйте элитные и проверенные прокси-сервера.


Использование API более рационально. API предоставляют данные в значительно более легкой форме, что значительно меньше грузит систему. Тем не менее, ключ может часто блокироваться, что способно создать определенные неудобства, в тоже и Ваш IP также может попасть в черный список 2gis.ru и быть заблокирован.

2gis-парсер

Поддержка

Раздел поддержки модуля на форуме - http://vkaragande.info/forum/topic_2314

 

Автор модуля [ construktor ]


!!! Помните, что администрация не несет ответственности за работоспособность данного модуля в случае блокировки Вашего ключа, IP, либо по какому-либо другому признаку со стороны сервиса 2gis.ru. И при покупке модуля данные риски возлагаются на покупателя.


Для работы в режиме без API необходимо наличие клиентской библиотеки php Curl и расширения javascript Object Notation для работы функции json_decode!


Рекомендации! В модуле предоставлена sql-база по городам и рубрикам на апрель 2015 года. Разногласия между данными на текущий момент маловероятно. Тем не менее в базе более 100 городов и более 10 тысяч рубрик, что может создать существенные неудобства и увеличить время загрузки. Если Вы используете лишь некоторые города, рекомендуется самостоятельно наполнить рубрикатор необходимыми городам. Если у Вас тематический каталог, то рекомендуется заполнить рубрикатор лишь необходимыми рубриками, используя режим без ключа.

 

Вы также можете заказать собственный парсер на 2gis.ru для другого сайта и с другой структурой базы данных.

Купить скрипт

Цена: 30$

Мгновенное получение товара после оплаты.
Внимание! Покупая данное решение, через наш магазин, Вы получаете + 60 дней бесплатной подписки! После покупки свяжитесь с администрацией сайта поддержки для начисления в Вашем профиле бонусных дней! Подробнее!

Метки: Construktor, импорт

^