<CD_DOCURL!> - как узнать URL на который переадресовывает сайт?

Тема в разделе "Функции и интерфейс программы", создана пользователем pavelbe, 8 окт 2015.

  1. pavelbe

    pavelbe New Member Пользователи

    Регистрация:
    9 сен 2015
    Сообщения:
    41
    Всем привет!

    В шаблоне вывода прописываю <CD_DOCURL!> - ссылка, которую парсит программа:
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Спасибо! Ждемс ответ :)
     
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Нажать ctrl+h и включить CheckBox "работать с редиректными ссылками".

    С уважением к вам, Сергей...
     
  3. pavelbe

    pavelbe New Member Пользователи

    Регистрация:
    9 сен 2015
    Сообщения:
    41
    Ошибка....

    Спасибо, уже нашел!

    Возникла другая проблема.
    Программа парсит ссылки, уменьшает потоки, не дает нажать на паузу.

    Приложил проект и скриншот.

    Посмотрите пожалуйста.
     

    Вложения:

  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Погонял ваше проект с дебаггером в 50 потоков - вылетала ошибка Out Of Memory (переполнение памяти).

    Попробуйте парсить в 10 потоков (тогда проблема возникать не должна)!

    Процедура парсинг контента очень большая и я, боюсь, в ближайшее время не смогу найти причину переполнения памяти.

    Приношу извинения за неудобства.

    С уважением к вам, Сергей.
     
  5. pavelbe

    pavelbe New Member Пользователи

    Регистрация:
    9 сен 2015
    Сообщения:
    41
    в 10 потоках на 2х серверах очень медленно, около 7 миллионов доменов нужно пройти.
    Если возможно, попробуйте найти проблему и исправить, готов ждать.
    в 10 потоков это года наверное :(
     
  6. pavelbe

    pavelbe New Member Пользователи

    Регистрация:
    9 сен 2015
    Сообщения:
    41
    Скорее всего проблема все в том же checkentry
     
  7. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Похоже на то, что на некоторых сайтах библиотека CIS переполняет память. Например, вот на этом:
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Что делать:

    1) Обновить программу:
    2) Использовать библиотеку Indy (включается в окне ctrl+h)


    Проект, который многократно удачно прошел испытания прилагаю к сообщению.

    Надеюсь, проблем больше не будет!

    С уважением к вам, Сергей...
     

    Вложения:

Поделиться этой страницей