CD заполняет всю память и останавливается

Добрый день.
Взял ВПС 3 ядра, 3 озу. Поставил КД, парсинг в 10 потоков, 10к ссылок. В итоге на 5к КД перестает парсить, т.к оперативка заполняется полностью. Причем КД не останавливается, просто как бы перестает парсить, подвисает, и я не могу экспортировать лог или сохранить проект. Только завершить задачу через диспетчер.
Можно ли как-то решить эту проблему, чтобы не надо было каждый раз вручную перезагружать софт?

 

Как вариант, разделить общий файл с ссылками на более мелкие, по 1к ссылок в файле.
для каждого файла продублировать файл проекта, со своим набором ссылок.
добавить в планировщик для последовательного парсинга

 

Супер, спасибо! Только логи этих проектов я никак не смогу посмотреть?

 

Смотрите настройки - Панель меню - Сервис - Лог парсинга

 

Сделал по этому совету, когда первый файл закончил парситься, память была загружена на 1900 мб.
КД перешел ко второму файлу, но память не обнулилась и следовательно на парсинге второго файла КД и подвиснет, т.к память будет только заполняться...
Приходится руками перезапускать софт, чтобы произошел сброс, а хотелось бы как-то автоматизировать это дело.

 

Как вариант Ссылки недоступны для гостей (не реклама)
Один из вариантов использования (без использования встроенного планировщика в CD):
- настроить мониторинг размера файла в который ведется парсинг
- при условии, что размер файл не меняется n- сек/мин смотря, как настроить - понимаем что парсинг завершился
- производим перезагрузку CD
- выполняем запуск следующего проекта

 

Предоставьте файл проекта.