Фильтр ранее спарсенных ссылок на этапе сбора

Тема в разделе "Парсинг во вкладке "Ссылки"", создана пользователем pps88, 6 фев 2015.

  1. pps88

    pps88 New Member Пользователи

    Регистрация:
    3 янв 2015
    Сообщения:
    24
    Есть ли возможность фильтровать ранее собранные ссылки на этапе поиска ссылок на сайте. Знаю что можно не парсить материал с ранее использованных ссылок через добавление в файл. Регулярно паршу БОЛЬШОЙ сайт и каждый раз обходить все ссылки немного долго.
     
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Такой опции сейчас в программе нет и она не нужна. Ведь перед парсингом контента ранее собранные ссылки из списка удаляются и программа так и так не будет их загружать.

    С уважением к вам, Сергей...
     

Поделиться этой страницей