2gis

Тема в разделе "Парсинг конкретных сайтов по запросу (ПЛАТНО)", создана пользователем Stan, 2 дек 2016.

Статус темы:
Закрыта.
  1. Stan

    Stan Active Member Пользователи

    Регистрация:
    15 июн 2011
    Сообщения:
    499
    продавался проект парсера 2gis помню в справочнике, не могу найти. или может есть урок, как там парсить?
     
  2. Stan

    Stan Active Member Пользователи

    Регистрация:
    15 июн 2011
    Сообщения:
    499
    не в курсе, сейчас 2гис можно парсить CD?
     
  3. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Не пробовали. Попробуйте сами.
     
  4. Stan

    Stan Active Member Пользователи

    Регистрация:
    15 июн 2011
    Сообщения:
    499
    как это не пробовали, я же видел где то у вас на сайте даже продавался проект за 500 рублей, или чот путаю
     
  5. Reset

    Reset Active Member Пользователи

    Регистрация:
    16 дек 2013
    Сообщения:
    114
    Насколько я помню на сайте никаких проектов не продается.
    Нужен какой о город 2Гис или что?
    У меня просто парсер есть под него отдельный
     
    Root нравится это.
  6. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    Я тоже помню что был проект 2gis-a...
    Но через поиск его не находит
     
  7. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    Проверил сайт, нашел "лазейки" на сайте.
    1) Как спарсить абсолютно все ссылки на любой желающий город. (При этом исключаем дома, остановки, парковки и прочею чепуху, парсим только Организации. Я уже спарсил все ссылки на все организации всех городов 2gis-a).
    При этом не используя wbapp и тому подобное. (если не использовать WbApp это увеличивает скорость парсинга в 50-100 раз).
    2) Парсинг проходит по лазейке, а не по стандартному как его бы парсили все.
    Так что это тоже увеличивает скорость парсинга. :)
    Опишите в деталях потребности к Проекту.

    Точнее составьте ТЗ :)
     
    Последнее редактирование: 6 дек 2016
    kagorec нравится это.
  8. Stan

    Stan Active Member Пользователи

    Регистрация:
    15 июн 2011
    Сообщения:
    499
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 21 постов.**
    адрес
    телефон
    сайт
    название
     
  9. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    Парсится, скоро приложу CSV файлик
     
  10. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    Пожалуйста :)
    Приложил CSV файл.
    Untitled.png
    Моим методом отпарсил ту ссылку которую вы указали за 10 минутّ~.
    P.S. на самом дело 9776 результатов а не 10496 как показывает сайт.
     

    Вложения:

    Последнее редактирование: 7 дек 2016
    Root нравится это.
  11. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    2ГИС "поменялся". Новую версию парсить мне не доводилось.
     
  12. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.431
    Адрес:
    Latvia
    Глянул код, теперь гораздо проще стало настроить. Если ранее в api пряталось все, то теперь можно с пагинации прямо:D
    Надо будет заготовку сделать на всякий случай.
    Может, обратитесь к napserious - вам даже подтверждение предоставили)
     
  13. Stan

    Stan Active Member Пользователи

    Регистрация:
    15 июн 2011
    Сообщения:
    499
    ну ок, я в личку ему написал по поводу проекта, не отвечат

    т.е. там можно без wbapp даже парсить?
     
  14. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.431
    Адрес:
    Latvia
    Без wbapp проверял - работает.
     
  15. koleso62

    koleso62 New Member Пользователи

    Регистрация:
    28 янв 2013
    Сообщения:
    29
    Пробовал парсить без WBApp, без него парсятся не все страницы с фирмами, а максимум 5 . После того как я спарсил с WBApp все страницы нужных мне фирм и приступил к парсингу каждой страницы я увидел что не все страницы парсятся. К примеру ссылка Ссылки недоступны для гостей
    не парсится и выдает ошибку (см. скрин), но при этом в браузере открывается нормально.
    [​IMG]

    [​IMG]
     
    Последнее редактирование: 4 янв 2017
  16. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    2017-01-04_10-35-45.png
     
    koleso62 нравится это.
  17. seogad

    seogad New Member Пользователи

    Регистрация:
    7 май 2010
    Сообщения:
    9
    Коллеги, нужен парсинг стоматологий с 2гис. У кого можно купить проект/настройку?
     
  18. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Попробуйте обратиться с этим вопросом к специалистам Ссылки недоступны для гостей

    Спасибо!
     
Статус темы:
Закрыта.

Поделиться этой страницей