Может ли быть такое?

Тема в разделе "Решение проблем с использованием программы", создана пользователем Siroff, 26 апр 2015.

  1. Siroff

    Siroff New Member Пользователи

    Регистрация:
    17 апр 2015
    Сообщения:
    117
    Сделал проект, начинаю парсить сначала все нормально, затем скорость падает и все 0 документов в секунду, начинаю проверять сайт донор перестает работать, пробую в другом браузере тоже сайт не работает, понимаю что это бред и по идее сайт донор живет своей жизнью и программа никак не может на него повлиять, но это происходит третий раз подряд, те перед парсиногом сайт работает, потом перестает, не могу спарсить, что это может быть?
     
  2. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.664
    Здравствуйте!
    Обычно такая ситуация может возникать по многим причинам, и лучше всего указывать сайт.
    Но вообще
    1) вы просто его ложите парсингом. (слишком много потоков, ставим 1 и должно все нормально парсится)
    2) вы не передаете куки (ctrl+k)
    3) надо смотреть)))
     
  3. Siroff

    Siroff New Member Пользователи

    Регистрация:
    17 апр 2015
    Сообщения:
    117
    Сайт lika-kids.ru , у меня он не работает до сих пор.
    Куки нужно передавать всегда?
     
  4. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.664
    Вы по всей видимости получили бан по айпи.
    Нажимаете ctrl+r
    откроется список прокси.
    Идете на просторы интернета и находите любые бесплатные прокси, например
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    оттуда копируете список проксей и вставляете в программу. Не забываем нажать кнопку Добавить прокси и подождать пока программа отработает.
    потом попытатся опять получить код сайта.
     
  5. Siroff

    Siroff New Member Пользователи

    Регистрация:
    17 апр 2015
    Сообщения:
    117
    У вас сайт работает? У меня уже было такое, через часов 8-10 начинает работать, но в момент парсинга опять зависает, значит через прокси пробовать?
     
  6. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.664
    пришлите ваш проект, можно на почту.
     
  7. Siroff

    Siroff New Member Пользователи

    Регистрация:
    17 апр 2015
    Сообщения:
    117
    отправил.
     
  8. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.429
    Адрес:
    Latvia
    Через Advor можно парсить в обход бана.
     
  9. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.664
    Посмотрел проект, бан по айпи
    нужно ставить 1 поток + прокси
     

Поделиться этой страницей