Как задать фильтр для товаров?

Тема в разделе "Сбор ссылок сканером сайтов", создана пользователем weresa, 7 янв 2018.

  1. weresa

    weresa Member Пользователи

    Регистрация:
    14 сен 2014
    Сообщения:
    125
    Доброго дня.
    На сайте есть ссылки для РАЗДЕЛОВ такого вида:
    Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме!
    внутри них есть ссылки для КАТЕГОРИЙ такого вида:
    Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме!
    внутри которых ссылки ОТДЕЛОВ вида:
    Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме!
    А уже в них ссылки на ТОВАРЫ вида:
    Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме!
    То есть вся иерархия обозначается номером в конце ссылки с разными буквами, и только у товара нет буквы.
    ВОПРОС: как настроить фильтр в сканере, чтобы собирались только ссылки на товары?
    Что-то наподобие вот этого можно написать: -{num}.html ? /= после черточки сразу номер/

    П.С. Упрощаю вопрос - как в принципе можно собрать ссылки на товары с этого сайта? Сканер не собирает ни одной ссылки со страницы самого нижнего уровня(((
     
    Последнее редактирование: 7 янв 2018
  2. xLime

    xLime Well-Known Member Супер Модератор Модератор

    Регистрация:
    4 сен 2017
    Сообщения:
    314
    Добрый день.
    Попробуйте. Вставляете в шаблон фильтра ссылок.
    Код:
    re:www.conrad.biz/de/[^/]+-\d+\.html
    [​IMG]
     
    Последнее редактирование: 7 янв 2018
    Root нравится это.
  3. weresa

    weresa Member Пользователи

    Регистрация:
    14 сен 2014
    Сообщения:
    125
    xLime, не знаю, что должно произойти с использованием этого "заклинания", но у меня никакого результата :(
     
  4. Mind

    Mind Well-Known Member Пользователи

    Регистрация:
    8 ноя 2016
    Сообщения:
    105
    Немного добавил в конструкцию конец строки.
    Поставьте как на скрине и начнется волшебство)
    Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме!
     
    Root нравится это.
  5. weresa

    weresa Member Пользователи

    Регистрация:
    14 сен 2014
    Сообщения:
    125
    Пошло!! Реально волшебство какое-то. Спасибо)
     
    Root нравится это.
  6. weresa

    weresa Member Пользователи

    Регистрация:
    14 сен 2014
    Сообщения:
    125
    Эх, рано я обрадовалась... Собралось 800 ссылок всего, а на сайте более млн товаров. Причем внутри подраздела ссылки по-прежнему не собираются. Почему-то они принципиально отсутствуют на странице раздела(( Вот раздел - Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме! , а ссылки на товары сканер в упор не видит. Как быть-то?
     
  7. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.119
    я бы на вашем месте не использовал сканер для сбора, а делал бы все полуручным способом.
    Настроил 1 проект на парсинг категорий, подкатегорий
    2 на парсинг и генерацию страниц
    а 3-м уже собирал то что надо.
    но это я.
     
  8. Root

    Root Администратор Команда форума Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    9.624
    Город:
    Сочи
    Старайтесь изучать систему помощи.

    Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме!
     

Поделиться этой страницей