Со временем перестает парсить через список прокси

Тема в разделе "Решение проблем с использованием программы", создана пользователем Felix_b, 29 дек 2017.

  1. Felix_b

    Felix_b Well-Known Member Пользователи

    Регистрация:
    30 мар 2017
    Сообщения:
    111
    Здравствуйте, надо 120 000 спарсить, сначала через прокси в 30 потоков спарсило 4000 а потом не загружало страницы. После чего включил парсинг через ctrl+h - Ну просто нереально медленно, медленней обычного.

    В чем может быть причина и как мне спарсить ? Прошу помогите.

    Проект прикрепил.
     

    Вложения:

    • eburg.cdp
      Размер файла:
      1,1 МБ
      Просмотров:
      2
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    11.068
    Город:
    Сочи
    Здравствуйте.

    Если страницы перестали загружаться через прокси, значит либо прокси перестали работать, либо эти прокси сайт забанил. Обзаведитесь более обширным списком более качественных прокси.

    С уважением к вам, Сергей.
     
  3. Felix_b

    Felix_b Well-Known Member Пользователи

    Регистрация:
    30 мар 2017
    Сообщения:
    111
    Большое спасибо за профессиональный ответ.
    С наступающим и большим уважением к Вам.
     
    Root нравится это.

Поделиться этой страницей