Приостановить парсинг после парсинга 100 документов

Тема в разделе "Решение различных задач по парсингу", создана пользователем dexperanto, 21 дек 2019.

  1. dexperanto

    dexperanto New Member Пользователи

    Регистрация:
    21 ноя 2014
    Сообщения:
    123
    Добрый день.
    Где-то в настройках можно задать, чтобы в списке из, допустим, 15 тысяч ссылок, парсер проходил 100 и останавливался полностью? А я кликером буду отслеживать и ребутить модем.
     
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Для приостановки парсинга используйте макрос шаблона вывода [WAITFORME].

    Проверить, сотый документ или нет можно с помощью конструкции макросов [IF1] и [INT_ID].
     
  3. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.429
    Адрес:
    Latvia
    При возможности ребутить модем через запуск .bat файла - используйте условие

    Через каждые 100 страниц запускать bat файл (с командой ребута модема), подождать 60 секунд и продолжить парсинг далее.

    Код:
    [IF2][INT_ID]>100[THEN][RUN]C:\reboot_my_modem.bat[/RUN][WAIT:60000][ELSE][/IF2]
    [​IMG]
     
    Root нравится это.

Поделиться этой страницей