Планировщик и сканер сайтов

Здравствуйте.
Подскажите пожалуйста по фукнционалу программы.

Задача #1
Пройти по ссылке и просканировать страницу и собрать все ссылки (Например у меня проект называется 1)

Проект составлен, сканер сайтов все собирает при запуске планировщика.
Вопрос: как настроить программу, чтобы после того, как сканер сайтов собрал ссылки он их сохранил в файл например 1.txt ?

Задача №2
Ссылки из файла 1.txt загрузить в сканер сайтов и просканировать на другие ссылки.
Вопрос: как настроить проект, чтобы при запуске из планировщика ссылки из файла 1.txt загружались в сканер сайтов и сохранить эти ссылки в файл 2.txt?

В последствии из ссылок из 2.txt получить контент (это CD выполняет отлично!)

Заранее спасибо

 

если вам надо собрать ссылки С ОДНОЙ СТРАНИЦЫ (вы ведь написали именно со страницы а не с сайта) - потом собрать ссылки с этих ссылок - и дальше распарсить контент по этим ссылкам - то вы все делаете не так. сканер здесь вообще не при чем, равно как и планировщик.
в целом же вопрос сформулирован настолько невнятно (вероятнее всего по причине неуверенного владения базовым функционалом программы) - что и ответить на него почти невозможно. только гадать.

первое впечатление - вы решаете задачу не тем функционалом, который требуется.

 

Поясню более подробно.
Есть сайт например Ссылки недоступны для гостей
Я сканером с нужными мне фильтрами собираю все ссылки со СТРАНИЦЫ (она динамичная).
Затем по этим ссылкам я опять сканером собираю ссылки на нужные мне статьи.
И в конце уже по полученным ссылкам собираю нужный мне контент.

Все это нужно делать с некой периодичностью, то есть настроить планировщик, чтобы он запускался в определенные промежутки времени.

Моя основная проблема - я не знаю, как сохранить результаты 2-ух первых парсингов в файлы.

 

совершенно верно.
разве что SCANDIR наверно не понадобится, второй проект забирает ссылки из заранее обусловленного текстового файла (который только что создан первым проектом), а по окончании работы второго проекта папка с этим файлом автоматически очищается.

и все в цикл.

 

Добрый день!
При запуске планировщика на сканер сайта, список очереди всегда пуст. Подскажите, как зафиксировать там ссылки для конкретного проекта?

 

В сканере поставьте галочку "запускать парсинг контента после окончания работы сканера" и тогда ссылки очереди будут сохраняться в проекте. Если такой вариант не устроит (после сканирования контент парсить не надо), то пишите - что-нибудь придумаем.

 

Нет, именно это и нужно, спасибо)