[решено] Сайт не открывается при указании границ

Тема в разделе "Решение проблем с использованием программы", создана пользователем kagorec, 25 мар 2012.

  1. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.431
    Адрес:
    Latvia
    Здраствуйте.
    Наверняка бывали такие случаи когда сайт работает (в броузере) а в CD когда пытаемся указать границы то выводит сообщение в окне просмотра кода:
    Решение
    кнопка "дополнительно"
    User Agent сменить на Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
    там же прописать куки b=b
    Теперь все работает (решение подошло к www.ua.all.biz/enterprises/by_name/?page=2)

    Стоит отметить что в некоторых сайтах требуются свои cookies - отловим снифером и подставляем также в Content Downloader
    Снифить рекомендую аддонами броузера Mozilla такими как HttpFoxy или LiveHttpHeader. (позволяют отловить cookies и укажет user agent при просмотре сайта)


    п.с. Спасибо автору программы за совет :)
     
    Последнее редактирование: 28 мар 2012
  2. RuslanLight

    RuslanLight New Member Пользователи

    Регистрация:
    10 ноя 2013
    Сообщения:
    6

Поделиться этой страницей