Есть ли способ сбора только новых сылок при помощи "Сканер сайтов"?

Тема в разделе "Парсинг во вкладке "Ссылки"", создана пользователем jeDauphin, 22 май 2013.

  1. jeDauphin

    jeDauphin New Member Пользователи

    Регистрация:
    20 фев 2013
    Сообщения:
    91
    Имеется сайт донор с которого был спарсен весь товар, предварительно собрав сылки с помощью "Сканер сайтов".
    В общей сложности - около 500к сылок.

    Теперь необходимо заново собрать сылки, но только новые.
    Можно ли запустить "Сканер сайтов", но чтобы он собирал только новые сылки, те что не присутствуют в моем списке (как указал, их около 500к и если сканировать весь сайт-донор заново, то нужно пару суток ждать, для того чтобы получить пару десятков новых сылок).
     
  2. nikolas1612

    nikolas1612 Member Пользователи

    Регистрация:
    27 ноя 2011
    Сообщения:
    439
    разве что поиграться с бекапом сканера. но это не совсем то, о чем вы говорили.
    если не подойдет - ответ на ваш вопрос НЕТ. и это логично. чтобы найти новое везде, сканер будет лопатить все. общие функции отсева дублей подключаются позднее, перед загрузкой контента.
     

Поделиться этой страницей