Не загружается страница

Тема в разделе "Решение проблем с загрузкой WEB-страниц", создана пользователем puzzzzzy, 27 янв 2020.

  1. puzzzzzy

    puzzzzzy Member Пользователи

    Регистрация:
    18 ноя 2016
    Сообщения:
    26
    Добрый день,
    есть сайт Ссылки недоступны для гостей , парсил пол года назад без проблем,
    но сейчас не загружается страница, я уже перетыкал все режимы, настройки ссл и тсл, результата нет(
    при режиме CIS удается получить какой то большой кусок ява скрипта. Но получить html никак.
    В IE открывается без проблем.
    Помогите пожалуйста решить проблему.
     

    Вложения:

  2. puzzzzzy

    puzzzzzy Member Пользователи

    Регистрация:
    18 ноя 2016
    Сообщения:
    26
    Очень странно, создал новый проект, поставил те же настройки, все заработало, вернулся в проект, и в проекте все заработало.
     
  3. puzzzzzy

    puzzzzzy Member Пользователи

    Регистрация:
    18 ноя 2016
    Сообщения:
    26
    В итоге спарсил около 100 позиций и все вернулось обратно, похоже на бан, но в IE проблем нет
    Прикрепил сам проект, не понимаю в чем проблема.
     

    Вложения:

  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Вы сами написали, что похоже на бан.

    Используйте список прокси, чтобы избежать бан (ctrl+r).
     
    puzzzzzy нравится это.
  5. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.431
    Адрес:
    Latvia
    Пробуйте парсить через Advor (ссылка у меня в подписи).
    Не исключено что на сайте добавили защиту от парсингов. Придется искать методы обхода лимита, примените список прокси (Ctrl+L) и список юзерагентов (Ctrl+h)
     
  6. puzzzzzy

    puzzzzzy Member Пользователи

    Регистрация:
    18 ноя 2016
    Сообщения:
    26
    Большое спасибо!
     
    Root нравится это.

Поделиться этой страницей