Баг-репорты

У меня в последних обновлениях при парсинге 100% но не может закончить работу.
Стоп нажимаю, тоже все время грузится.
Как принудительно остановить и сделать нормальный вид CSV?

 

Здравствуйте.



Вышлите на почту файл проекта:

Скрытое содержимое:

**Скрытое содержимое: доступно при наличии 1 постов.**

 

Спасибо, отправил

 

Пожалуйста.

Проект изучил. Причину понял.

Увы, это проблема компонента Clever Internet Suite, которая появляется только при использовании прокси (вроде только HTTP, с SOCKS скорее всего проблемы нет). Выявили проблему недавно. Была ли она все время или только с обновлением компонента до версии 9.6 - пока не выяснили. Просьбу устранить проблему отправил. Надеемся, что в скором времени исправят.

1) Выберите библиотеку WIN в окне настроек HTTP запросов программы.
2) Выберите библиотеку WIN (не WIN2) в окне настроек макроса DOWNLOADFILE





При использовании библиотеки WIN такой проблемы нет.

-------------------------------------------------------------------------------------------------

Сейчас в программе используется релизная версия библиотека Clever Intenet Suite 9.6

Если у вас есть возможность протестировать у себя ваш проект с выбранной библиотекой Clever Internet Suite на наличие данной проблемы в версиях Content Downloader:
11.1.1110078 (используется версия Clever Internet Suite Pre 9.6)
11.1.1110027 (используется версия Clever Internet Suite 9.5)
И предоставить информацию о наличии проблемы на этих версиях - эта информация скорее всего будет полезна для разработчиков компонента Clever Internet Suite в качестве помощи в устранении the bug.

Установочные файлы предыдущих установленных версий Content Downloader хранятся на диске C и расположены по пути C:\content_downloader\updates

 

При парсинге через Cron (планировщик задач) после завершения задачи в скрытых значках остается вот такая петрушка, которая тормозит всю систему.

Спойлер: Картинка

Таких значков при открытии может быть на весь экран, и естественно, когда пытаешься навести курсором мыши, то они тут же пропадают.
Комп на VPS Windows Server 2019, закрытие программы после завершения задачи настроено.
Можно этот момент как-то подправить? А то VPS после 2-3 дней не чистки от этого "Намертво" зависает, пока не перезагрузишь машину.

 

CDx тут не причем, это проблема кочует из windows к windows начиная с 7

 

Здравствуйте.

В диспетчере задач в процессах при этом висит множество процессов Content Downloader.exe?

Что именно у вас тормозит систему (что именно занимает процессор, систему?) От чего зависает?

Если хотите, можете написать в

Скрытое содержимое:

**Скрытое содержимое: доступно при наличии 1 постов.**

Для тестирования.

 

Здравствуйте.

Настройка макроса DOWNLOADFILE:



Настройка DFN:


[DFN][REWRITE]{path}E:\Project\images\{/path}[ALL][CLEAR][TRANSLITE][/DFN]
или

[DFN][REWRITE]{path}E:\Project\{/path}[ALL][CLEAR][TRANSLITE][/DFN]

То есть, надо чтобы картинки скачивались просто в папку images

Но каждый раз откуда-то берется после images папка files, хотя ее нигде нет и нигде не указана.

 

Здравствуйте.

Не приложен файл проекта.

 

Приложил

 

Спасибо.

 

При использовании [DFN] все данные по наименованию папок берутся из него.

В вашем случае нужно вынести конечную папку из пути за пределы оператора {path}

Код:

[DFN][REWRITE]{path}C:\06. Парсинг Profvest\{/path}images\[ALL][CLEAR][TRANSLITE][/DFN]

 

Здравствуйте,

Появилась проблема, в последнее время.
Ставлю парсинг с прокси, в новой версии программы (1110085), через планировщик задач CD, и заметил что всегда на разных сайтах, зависают потоки в конце парсинга, зависают навсегда, ждал несколько суток, менял паузы и прочее, ничего не помогает.
Ставлю несколько тысяч (5-10), в конце парсинга висят не обработанные потоки и они не завершаются.

Спойлер: скрин

С теми же проксями ставлю парсинг, но уже на версии CD 1110027, работает идеально, на протяжении всего периода парсинга.
Подскажите пожалуйста, в чем может быть проблема?

 

Здравствуйте.

Мой тикет в поддержку компонента Clever Internet Suite.


Так и остался без ответа.

 

Используйте библиотеку WIN, с ней такой проблемы нет.

 

Здравствуйте. При парсинге контента с ссылок, где встречаются апострофы например Ссылки недоступны для гостей
В фильтрации документов при парсинге (ctrl+t) в указанный текстовик падает ссылка без апострофа
Ссылки недоступны для гостей
Т.е. потом изначальная ссылка Ссылки недоступны для гостей все равно уникальная

 

Здравствуйте!
при разделении большого файла xml вылезает такая ошибка файл 1,7gb

 

Увидел сегодняшнюю обнову. Ура! Спасибо!

 

Спасибо ребятам с LA и РФ, кто исправил. Пришлось им понаписывать многократно.

 

Здравствуйте.

Под такие объемы данная функция не предусматривалась. Обрабатываются файлы до 1GB. Пожелание учел. Спасибо.