Ограничить сбор ссылок в пагинации

Тема в разделе "Фильтры ссылок", создана пользователем inotoxic, 10 апр 2018.

  1. inotoxic

    inotoxic Well-Known Member Пользователи

    Регистрация:
    13 сен 2015
    Сообщения:
    867
    К примеру, на сайте 100 страниц в пагинации, как ограничить сбор только с первых 30 страниц ?
    Спасибо.
     
  2. gans

    gans Well-Known Member Пользователи

    Регистрация:
    21 апр 2014
    Сообщения:
    309
    Во вкладке Ссылки вставить Ссылки недоступны для гостей и сгенерировать ссылки с 1 по 30, потом собрать.

    [​IMG]
     
  3. inotoxic

    inotoxic Well-Known Member Пользователи

    Регистрация:
    13 сен 2015
    Сообщения:
    867
    Спасибо за подсказку - знаю)
    не удобно смотреть для каждой категории на сайте глубину пагинации
    а так накидал ссылок на категории, в сканере указал предел, к примеру в 50 страниц = ссылки собрались только с 50 страниц.

    Наверное нужно в хотелки перенести
    В сканере ссылок добавить кнопку "Ограничение страниц пагинации"
     
  4. gans

    gans Well-Known Member Пользователи

    Регистрация:
    21 апр 2014
    Сообщения:
    309
    Во вкладке Ссылки нажмите правой кнопкой мышки на строку генерации ссылок, выберите Редактировать список, введите такую конструкцию:
    Код:
    http://site.ru/cat1/page{num}[DATA]:1|30|1
    http://site.ru/cat2/page{num}[DATA]:1|30|1
    http://site.ru/cat3/page{num}[DATA]:1|30|1
    Потом нажмите на кнопку Сгенерировать ссылки и выберите Использовать список шаблонов генерации ссылок, после сгенерируйте ссылки Используя диапазон {num}. Оно?
     
    Dron25 и kagorec нравится это.
  5. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Решение зависит от сайта, от нюансов, от условий.

    Можно в фильтр очереди ссылок сканера добавить первых 30 номеров страниц (чтобы он ходил только по этим 30 ссылкам).
     
    inotoxic нравится это.
  6. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.429
    Адрес:
    Latvia
    Собирайте через сканер, стартовая ссылка в сканере
    Код:
    http://site.ru/page - это как пример
    Для списка очереди правила:
    Код:
    re:/page[0-9]{0,1}$
    re:/page[12]+[0-9]{0,1}$
    re:/page30$
     
    Root, gans и inotoxic нравится это.
  7. gans

    gans Well-Known Member Пользователи

    Регистрация:
    21 апр 2014
    Сообщения:
    309
    Если, как сказал человек, там обычная пагинация, то зачем изобретать велосипед? Приведенный мной выше способ прекрасно работает - просто задается несколько шаблонов с нужным шагом(например, категории) во вкладке Ссылки.

    [​IMG]

    А вот пример генерации с диапазоном 1-3:
    [​IMG]
     
    Root и inotoxic нравится это.
  8. inotoxic

    inotoxic Well-Known Member Пользователи

    Регистрация:
    13 сен 2015
    Сообщения:
    867
    Всем спасибо, за возможные варианты реализации.
    Отдельное мега-спасибо:) разработчику, за CDX и гибкую реализацию тех или иных возможностей парсинга.
     
    Root нравится это.

Поделиться этой страницей