сбор ссылок из категории

Тема в разделе "Сбор ссылок сканером сайтов", создана пользователем Magsim, 7 дек 2021.

  1. Magsim

    Magsim New Member Пользователи

    Регистрация:
    16 мар 2014
    Сообщения:
    45
    Здравия всем
    Пожалуйста направьте в нужном направлении
    Имею категории
    Ссылки недоступны для гостей
    ДОбавляю в очередь нужные категории
    Но в выдаче выходят аксесуары, которых не должно быть, сами товары не парсятся.
    Направьте пожалуйста.
     
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Нормально там все.

    Сканер настроил.
     

    Вложения:

  3. Magsim

    Magsim New Member Пользователи

    Регистрация:
    16 мар 2014
    Сообщения:
    45
    Спасибо
    Только там сканируется много лишнего, аксессуары, которых нет в категории и много дублей с разными страницами, но одинаковым товаром, такое можно убрать?
    Тут хотелось бы понять самому как это делается, где почитать, если не трудно направьте.
     
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    В категории, которую вы указали на сайте заявлено 3396 товаров. Сканер сайтов ее обрабатывает секунд за 15 и находит 3396 товаров. В итоге ни одного дубля ссылок нет.
     
  5. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Если хотите парсить не все подрубики, а только часть из них. Укажите их здесь.

    2021-12-08_09-37-47.png
     
  6. Magsim

    Magsim New Member Пользователи

    Регистрация:
    16 мар 2014
    Сообщения:
    45
    Спасибо, кажется разобрался. в одной из категорий были аксессуары, хоть и должны быть там...
     
    Root нравится это.

Поделиться этой страницей