Почитал посты по этой теме. Самая распространенная проблема - трояны... Если парсите с использованием библиотеки Internet Explorer (DOM), то это, скорее всего, из-за того, что Internet Explorer вызывается огромное количество раз. Думаю, Windows просто не рассчитана на такое количество запусков IE =)
Сейчас я попробовал парсить с использованием Internet Explorer (DOM) увидел незначительный рост занимаемой одним из svchos.exe памяти. Что с ним делать - непонятно. Единственное, что приходит в голову - поотключать службы Windows, которые отъедают память. Если это потребление памяти не отражается на работоспособности системы - проще не обращать на него внимания. PS: Тестировал без использования Internet Explorer (DOM) (парсинг внутренними библиотеками программы) - жора памяти не заметил!
Проект: replace&getmorecontent.cdp. Прислушался к вашему совету и создал еще один проект. К сожалению и в нем не работают макросы поиска-замены в границе парсинга "GETMORECONTENT" внутри макроса "IMAGESPATH". Макрос "FIRST_REPLACE" ничего не заменяет, т.к. выполняется первее "GETMORECONTENT", а макросы "BEFORE_IMG_REPLACE" и "REPLACE" выполняются некорректно. Зато не внутри макроса "IMAGESPATH", макросы "BEFORE_IMG_REPLACE" и "REPLACE" выполняются отлично в границе парсинга "GETMORECONTENT" выводя в документ то, что нужно. Проект: replace&cd_gran_x.cdp. При использовании макросов поиска-замены в обычной границе парсинга "<CD_GRAN_Х!>" внутри макроса "IMAGESPATH" выполняется только макрос "FIRST_REPLACE". Не внутри макроса "IMAGESPATH" в обычной границе парсинга "<CD_GRAN_Х!>" все три макроса выполняются отлично.
Здравствуйте. После установки CD 11 (с теми же параметрами установки) поверх предыдущих версий программы, в апплете панели управления "Программы и компоненты" появляется новая запись "Content Downloader X1", а не перезаписывается старая. Это происходит постоянно при каждом выходе новой версии программы, как только в установщике меняется значение параметра определяющего имя программы.
Здравствуйте. Так и задумано. Удаляйте старую версию (если она вам нужна). Такие "глобальные" обновления производятся крайне редко...
Наоборот удобно придумано чтоб старая версия у каждого оставалась на "всякий случай" (например для неактуальных настроек к новой версии)
в настройках список прокси открываю задать границы, поставил сайт определялку айпи в результате мой айпи. прокси не срабатывает. версия:
Учимся пользоваться программой. Нажимаем в программе Ctrl+r (откроется окошко добавления прокси) Смотрим рисунок и изучаем что нужно нажать 1) выбираете где будут применяться ссылки 2) Добавляете ваш список 3) НАЖИМАЕТЕ КНОПКУ "Добавить сервера/проверить список" 4) Получаете итоговое число рабочих прокси. Если при добавлении у вас прокси не добавятся, значит вы используете прокси с привязкой к IP а он у вас динамический и его нужно перепривязать перед использованием (например на сайте Hidden Content: **Hidden Content: To see this hidden content your post count must be 1 or greater.** так) Далее закрываете и загружаете любую ссылку. (Имеется ввиду 2-й клик, для предпросмотра) Нажимаете Ctrl+L и смотрите картинку №2 И в графе прокси, видим как загрузилась ссылка. Могу поспорить, что вы просто не добавили ваши прокси. P.S. Кстати забыл уточнить, если вы используете SOCKS4 или SOCKS5 Укажите это - выпадающее меню в котором сейчас HTTP
При редактировании списка прокси программа предлагает очистить закешированные при предпросмотре WEB-документы. Возможно, вы проигнорировали это сообщение и в результате у вас отображается код закешированной страницы. PS: Если использовать Internet Explorer (DOM) в ctrl+h, то прокси не работают! (пока...).
В теме http://forum.sbfactory.ru/showthread.php?t=296 описано как можно Wbapp прикрыть за Advor , хорошо если поможет.
Не получается задать границы парсинга В общем в некоторых группах ОД не отображаются посты в окне задания границ парсинга. В окне передачи куки такие посты отображаются. Также такие посты видны в окне "Предпросмотра элемента". Группы не закрыты. Вот ссылки на несколько таких постов также видно, что визуальная часть принадлежит другим постам, а не открытому коду страницы. Причем это не во всех группах такое происходит.
Здравствуйте. Нажмите ctrl+h, включите там Internet Explorer (DOM) и у вас будет (должно) все отображаться. С уважением к вам, Сергей.
Спасибо за отличную прогу! Но, кажется, после сегодняшнего обновления при работе с прокси стало чаще вылетать "недостаточно памяти для обработки команды", прокси https 1500 штук
последняя версия, сегодняшнее обновление, при закрытии окна задания границ парсинга - "неопознанная ошибка", что с заданными границами, что без (
Здравствуйте. Нет, при закрытии окна никакой ошибки мы не получаем... Скорее всего, эту ошибку дает модуль Internet Explorer (WEB browser, который вы видите в нижней части окна) при работе с определенным сайтом. Попробуйте работать с другим сайтом или закрыть браузер (кнопка слева вверху с изображением планеты или f5). По поводу "недостаточно памяти"- следите, чтобы программа занимала не более 1,5 ГБ оперативной памяти (в процессах). Приносим извинения за предоставленные неудобства. С уважением к вам, администрация сайта.
