парсинг ссылок когда внутри сайта страницы на скриптах

Тема в разделе "Парсинг во вкладке "Ссылки"", создана пользователем rim1, 5 ноя 2014.

  1. rim1

    rim1 New Member Пользователи

    Регистрация:
    5 ноя 2014
    Сообщения:
    10
    Добрый день!

    Помогите по парсингу ссылок?
    сайт на скриптах, не могу понять как программу настроить

    вот к примеру начальная ссылка
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    проблема в следующем :
    1 - попасть на вторую и последующую страницу с товаром можно нажав на кнопку со стрелкой, но она на скрипте (при этом адрес страницы не меняется)
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    можно конечно сгенерировать ссылки , но тогда получится около 8 миллионов ссылок (причём большая их часть работать не будет )

    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    я пробовал "сканером сайтов" в итоге - какой то бред получается
    если просто "парсинг ссылок" включить - то находит правильные ссылки с 1-ой стартовой страницы, а с остальных страниц, которые скриптом подгружаются, ссылок нет
     
    Последнее редактирование модератором: 5 ноя 2014
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Парсите по миллиону ссылок все 8 миллионов. Проще всего будет...

    С уважением к вам, Сергей.
     

Поделиться этой страницей