не загружается страничка для авторизации

Тема в разделе "Авторизация на сайтах", создана пользователем cherkas, 22 май 2018.

  1. cherkas

    cherkas Member Пользователи

    Регистрация:
    20 авг 2013
    Сообщения:
    54
    Адрес:
    Украина
    прошу помощи, при входе на страницу через границы парсинга страницы загружается, а при входе для авторизации нет.

     
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Предоставьте ссылку на сайт.
     
  3. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    • При предпросмотре/выборе границы вы открываете страницу через Proxy -> Она открывается
    • При авторизации вы открываете страницу без прокси -> Она не открывается
    Вывод: Ранее вы пытались отпарсить данный сайт без использования прокси и ваш IP адрес забанили за частые запросы.

    upload_2018-5-22_11-17-16.png

    Рекомендую: Использовать VPN для настройки проектов и т.д.
    И использовать платные приватные прокси для парсинга.
    Парсить надо с умом, а не в 5к потоков, иначе вас спалят и с вами будут бороться.

    Купил подписку на 4 года VPN. Установил на все девайсы.
    Скорость максимальная, я иногда даже забываю что он у меня есть.
    Никаких ограничений, все ограничения сайта по страннам обхожу.

    Переключение между странами выглядит вот так:

    upload_2018-5-22_11-22-14.png
     
    Последнее редактирование: 22 май 2018
    Root нравится это.
  4. cherkas

    cherkas Member Пользователи

    Регистрация:
    20 авг 2013
    Сообщения:
    54
    Адрес:
    Украина
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    да, подключаюсь через прокси, как предлагают здесь - http://forum.sbfactory.ru/threads/proxy-dlja-content-downloader-ispolzuja-tor.296/

    в бан попал после 3 дней парсинга в 10 потоков, при сборе ссылок

    не понятно почему прокси не работает когда происходит авторизация
     
  5. inotoxic

    inotoxic Well-Known Member Пользователи

    Регистрация:
    13 сен 2015
    Сообщения:
    867
    Не все прокси поддерживают POST
     
  6. cherkas

    cherkas Member Пользователи

    Регистрация:
    20 авг 2013
    Сообщения:
    54
    Адрес:
    Украина
    возможно, но тогда бы страница грузилась, а авторизироваться не получалось бы, но ведь страница совсем не грузится
     

Поделиться этой страницей