Баг-репорты

Тема в разделе "Развитие Content Downloader", создана пользователем Root, 10 мар 2010.

  1. inotoxic

    inotoxic Well-Known Member Пользователи

    Регистрация:
    13 сен 2015
    Сообщения:
    544
    Добрый вечер!
    С отключенным антивирусником - тоже не запускается ?
     
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    12.562
    Здравствуйте.

    Попробуйте сделать откат системы.

    Если не поможет, напишите мне в Ватсап
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
     
  3. Denorion

    Denorion Member Пользователи

    Регистрация:
    7 апр 2020
    Сообщения:
    45
    Город:
    Москва
    Добрый день!
    Не уверен, что это баг.
    Сейча если парсить ссылку каталога для отправки найденных ссылко в PHP для сортировки и обработки и возврата в этом же цикле обратно в программу - количство потоков будет равно изначальному количеству ссылок...
    Другими словами
    1. установлено 5 потоков - через браузер
    2. Закидываю одну ссылку страницы каталога
    3. Каждая ПГ вызывает локальный скрипт и передает туда ссылку и другие данные по этой ПГ
    4. Ответом PHP скрипта является либо ссылка с параметрами [PARAM] либо пусто
    После загрузки страницы каталога - эти 50 ссылок обрабатываются почти моментально - происходит 50 вызовов скрипта и скрипт либо отдает ссылку либо ничего не отдает
    5. В итоге из 50-ти изначальных ссылко на странице каталога - обратно в программу могут вернуться 20 или 30 или 40 ссылок, которые нужно обойти.
    6. И как только ссылки добавляются в список обхода через ADDURL - потоков уже не 5 а всего 1. Т.к. изначально была добавлена 1 ссылка. И все вновь добавленные ссылки парсятся в 1 поток.

    Сейчас я добавляю совешенно левые дополнительные ссылки, что бы потоки сохранились, пока они все обойдутся - скрипт уже вернет дополнительные ссылки и потоки остаются.
    Такая же история если использовать библиотеку CIS - и ставить 30-50 потоков - потоки бытренько убегают и потом при добавлении новых ссылок уже не добавляются вновь.

    Вот такая история

    Можно было бы сделать через планировщик и загрузку другого проекта с другим файлом ссылок через автоматизацию, но хочется в одном проекте сделать - два проекта уже сложно получается.

    Я покопался в настройках, но вроде ничего такого не нашел.

    Спасибо
     
  4. Petrushan

    Petrushan New Member Пользователи

    Регистрация:
    22 фев 2018
    Сообщения:
    7
    Город:
    Ульяновск
    Добрый вечер, да, выключенный антивирусник тоже не помогает.

    Вы про откат Windows?
    В WhatsApp напишу, спасибо за контакт.
     
  5. Petrushan

    Petrushan New Member Пользователи

    Регистрация:
    22 фев 2018
    Сообщения:
    7
    Город:
    Ульяновск
    Итак, на текущий момент, не помогло:
    • Удаление, переустановка и прочие шаманства с файлами Contend Downloader.
    • Проверка всей системы на вирусы.
    • Перезагрузка.
    • Откат Windows на более раннюю точку восстановления, когда всё работало.
    • Установка свежих драйверов (В том числе, установка разных драйвером, например, как OEM от Acer, так и не-OEM от Intel).
    • Установка Windows Software Development Kit.
    • Удаление всех программ, которые были поставлены после того как последний раз успешно работал Content Downloader (Да и был там, только скайп).
    • Полная проверка и восстановление файлов через sfc/scannow.
    • Полное удаление антивирусника (Стоял avast).
    • Обновление vc_redist.x64 2015-2019.
    • Отключение оповещений UAC.
    • Создание нового пользователя системы и запуск из-под него.
    • Добавление приложения в "Брандмауэр и безопастность сети".
    • Запуск приложения в режиме совместимости в том числе со всеми возможными пунктами.
    • Запрет приложениям работать в фоне.
    Dependency Walker говорит что есть ряд библиотек которые не установлены, скриншот прилагаю (Я думал, что наличие этих библиотек исправиться установкой Windows Software Development Kit, но нет). Между тем, прочитал в интернете - что ряд этих библиотек Dependency Walker выводит некорректно в список отсутствующих.
     

    Вложения:

    • dependency.png
      dependency.png
      Размер файла:
      58,9 КБ
      Просмотров:
      6
    Последнее редактирование: 23 май 2020
  6. Petrushan

    Petrushan New Member Пользователи

    Регистрация:
    22 фев 2018
    Сообщения:
    7
    Город:
    Ульяновск
    Обратил внимание на одну интересную особенность: Content Downloader как я и говорил, висит в процессах и кушает ресурсы. Но самое интересное - что его аппетиты постоянно растут.

    В среднем, за минуту прибавляется 50МБ к потреблению памяти.

    Кстати, забыл сказать, не так давно я приобретал лицензию на WBApp и парсил через Chromium. Может, это как то связано?
     
  7. kenny872012

    kenny872012 Well-Known Member Пользователи

    Регистрация:
    18 фев 2018
    Сообщения:
    206
    Сколько вы потоков задействуете при парсинге через Chromium?
     
  8. Petrushan

    Petrushan New Member Пользователи

    Регистрация:
    22 фев 2018
    Сообщения:
    7
    Город:
    Ульяновск
    Сейчас я вообще не могу открыть парсинг, у меня само приложение не открывается. Оно висит в процессах и кушает память, и на этом всё.

    Использовал 1 поток, когда это работало.
     
  9. evgeshik

    evgeshik New Member Пользователи

    Регистрация:
    30 янв 2017
    Сообщения:
    1

Поделиться этой страницей