Автоматический бекап при сканировании ссылок с сайта

Тема в разделе "Сбор ссылок сканером сайтов", создана пользователем pablo, 2 авг 2021.

  1. pablo

    pablo New Member Пользователи

    Регистрация:
    3 мар 2017
    Сообщения:
    11
    Здравствуйте.

    Парсил большой сайт, собирал ссылки 10 часов неспешно. Комп завис из-за другой программы, пришлось перезагружать. Можно ли как-то восстановить списки уже обработанных урлов + список на обход, чтобы заново не тратить 10 часов?

    Списки найденных урлов в SCANNER_RES_LINKS есть, но хочется восстановить все )


    ps если бы была возможность автоматически бекапить результаты каждые N минут - было бы здорово.
     
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Обратите внимание на эту опцию.

    2021-08-02_10-32-28.png
     
  3. pablo

    pablo New Member Пользователи

    Регистрация:
    3 мар 2017
    Сообщения:
    11
    спасибо, без пояснений с первого взгляда не догадался, что это.

    Если там у меня стояло 0, то восстанавливать нечего, верно? )
     
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    При значении 0 автобекап отключен.
     
  5. pablo

    pablo New Member Пользователи

    Регистрация:
    3 мар 2017
    Сообщения:
    11
    Если мне надо один и тот же сайт периодически сканировать на появление новых ссылок, можно ли при повторном парсинге сверять со списком ссылок, которые были найдены ранее?
    То есть чтобы в результате сканирования получать список ссылок, которые ранее не были найдены.
     
  6. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Если после сканирования планируется парсинг данных с этих ссылок во вкладке "Контент", то пользуйтесь этой опцией

    2021-08-02_12-37-27.png
     
    pablo нравится это.
  7. pablo

    pablo New Member Пользователи

    Регистрация:
    3 мар 2017
    Сообщения:
    11
    А если нужен только сбор ссылок, дальше их парсить не буду в CD.
     
  8. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Нужно делать опцию. Постараюсь сделать на днях.
     
    pablo нравится это.
  9. seodamage

    seodamage New Member Пользователи

    Регистрация:
    5 фев 2014
    Сообщения:
    31
    привет, а можно ли настроить чтобы попадал в папку текущего проекта? не удобно лезть в папку с программой + самих проектов может быть несколько и они друг друга получается перезапишут.
     
    kagorec нравится это.
Similar Threads
  1. avl
    Ответов:
    1
    Просмотров:
    1.467
  2. Roman
    Ответов:
    6
    Просмотров:
    1.988
  3. rezhisser
    Ответов:
    4
    Просмотров:
    1.320
  4. ПолныйТормоз
    Ответов:
    2
    Просмотров:
    712
  5. ClearRF
    Ответов:
    0
    Просмотров:
    525
Загрузка...

Поделиться этой страницей