не могу спарсить - нет предпросмотра сайта

Тема в разделе "Парсинг конкретных сайтов по запросу (ПЛАТНО)", создана пользователем EvgeN, 28 фев 2013.

  1. EvgeN

    EvgeN New Member Пользователи

    Регистрация:
    8 фев 2013
    Сообщения:
    17
    Здравствуйте. не подскажете как спарсить с сайта Ссылки недоступны для гостей. не могу сделать предпросмотр сайта для задания границ парсинга
     
  2. nikolas1612

    nikolas1612 Member Пользователи

    Регистрация:
    27 ноя 2011
    Сообщения:
    439
    посмотрите, открывает ли этот сайт обычный IE у вас в системе. желательно чтобы это был IE8 а не более ранние версии.
    обновите до последней версии саму программу. если не помогает -
    приложите проект указав что именно вам не видно (ссылка, товар, и т.д.).
    у меня, к примеру, все нормально отображается.
     
    Последнее редактирование: 28 фев 2013
  3. EvgeN

    EvgeN New Member Пользователи

    Регистрация:
    8 фев 2013
    Сообщения:
    17
    Документ, который вы пытаетесь загрузить, пуст.
    Возможные приины: невалидная ссылка, вас заблокировал сайт, вы загружаете пустой документ

    программа обновлена
     
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Вы знаете, прекрасно открывает, что эту Ссылки недоступны для гостей что эту страныцы Ссылки недоступны для гостей
    Файл проекта прикрепил (меню - файл -загрузить проект).
    Версия программы должна быть самой свежей.
     

    Вложения:

  5. EvgeN

    EvgeN New Member Пользователи

    Регистрация:
    8 фев 2013
    Сообщения:
    17
    Но вот это уже не открывает
     

    Вложения:

    • 0001.cdp
      Размер файла:
      13,4 КБ
      Просмотров:
      2
  6. nikolas1612

    nikolas1612 Member Пользователи

    Регистрация:
    27 ноя 2011
    Сообщения:
    439
    сидел тупел, писал умный комментарий, пока не дошло.
    все приведенные вами ссылки (в проекте 0001.cdp) битые. откройте их обычным браузером. они все ведут на одну и ту же страницу - главную страницу сайта.
    т.е. вас редиректят. эти ссылки - сохранившийся на сайте нерабочий мусор.
    и httpfox это подтверждает - сайт выдает на запрос браузера ответный заголовок -
    HTTP/1.1 404 Not Found
    такой страницы не существует, господа. так что CD не при чем.
     
    Последнее редактирование: 2 мар 2013
  7. EvgeN

    EvgeN New Member Пользователи

    Регистрация:
    8 фев 2013
    Сообщения:
    17
    Как избежать этого? нужен каталог.
     
  8. nikolas1612

    nikolas1612 Member Пользователи

    Регистрация:
    27 ноя 2011
    Сообщения:
    439
    этот,к примеру, чем не устраивает?
    Ссылки недоступны для гостей

    я не спец в сайтостроении - но могу предположить что одни ссылки со временем были заменены другими, а нерабочее старье просто по-быстрому "завернули" на заглавную страницу. забейте на старье, и все.
    даже с виду можно сказать, почему эти ссылки отсеяли - в них повторяющийся лишний фрагмент -
    Ссылки недоступны для гостейmebel-dom/mebel-dom/mebel-dlja-spalni.html?page=3
    поставьте в фильтре отсев ссылок с этим дублем и они вас более не побеспокоят
     
    Последнее редактирование: 2 мар 2013
  9. EvgeN

    EvgeN New Member Пользователи

    Регистрация:
    8 фев 2013
    Сообщения:
    17
    Разобрался. дело в linke который добавлял через браузер.
    _http://www.baltmebel.ru/mebel-dom/mebel-dom/mebel-dlja-spalni/kompozicija1.html
    а должно быть
    _http://www.baltmebel.ru/mebel-dom/mebel-dlja-spalni/kompozicija1.html
    лишняя вставка /mebel-dom. убрал - все заработало
     

Поделиться этой страницей