Вопрос про прокси (прокси отдают пустой код WEB-документа)

Тема в разделе "Прокси для парсинга", создана пользователем Stan, 10 мар 2018.

  1. Stan

    Stan Active Member Пользователи

    Регистрация:
    15 июн 2011
    Сообщения:
    499
    Здравствуйте.
    Использую прокси fineproxy, паршу ссылки на страницы и в логах у некоторых пишет
    Файл не сохранен: результир... док.. оказался пустым
    Если прокси отключить, то такого нет. Это из прокси такое? Может медленные?
     
    Stan, 10 мар 2018
    #1
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    По какой-то причине прокси серверы не отдают код WEB-документа.
     
    Root, 10 мар 2018
    #2
  3. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    А прокси работают? Уверены? файнпрокси с привязкой к айпи работают.
     
    Kreol, 10 мар 2018
    #3
  4. Stan

    Stan Active Member Пользователи

    Регистрация:
    15 июн 2011
    Сообщения:
    499
    работают конечно, страницы парсятся
     
    Stan, 10 мар 2018
    #4
  5. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    Возможно у страниц есть геолокация (скажет только Российский айпи нужны) Всяко может быть.
     
    Kreol, 10 мар 2018
    #5
  6. Stan

    Stan Active Member Пользователи

    Регистрация:
    15 июн 2011
    Сообщения:
    499
    :) у меня тариф Россия , там все российские
    просто у меня есть еще один проект
    сайт vseinstrumenti.ru , и там такая же штука, некоторые страницы не отдает
     
    Stan, 10 мар 2018
    #6
  7. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Можете использовать макрос [RELOADDOCUMENT] (для повторной загрузки WEB-документа) в случае, если прокси вернул пустой код.

    На пустоту можно проверять макросом шаблона вывода [CHECKENTRY].
     
    Root, 10 мар 2018
    #7
    Kreol и Stan нравится это.
Similar Threads
  1. Atms

    Парсинг через прокси (с периодической перепроверкой списка прокси)

    Atms, 8 янв 2016, в разделе: Прокси для парсинга
    Ответов:
    10
    Просмотров:
    46.176
    Kreol
    7 фев 2018
  2. Djahat

    PROXY дает 1 порт на 50 потоков - как использовать 50 потоков CD

    Djahat, 12 фев 2017, в разделе: Решение проблем с использованием программы
    Ответов:
    5
    Просмотров:
    2.666
    Root
    12 фев 2017
  3. SequelONE

    Где лучше всего купить прокси?

    SequelONE, 28 апр 2017, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    18
    Просмотров:
    5.079
    kagorec
    26 дек 2018
  4. rdw

    Не парсится через прокси, висит 1 поток.

    rdw, 10 июл 2017, в разделе: Решение проблем с использованием программы
    Ответов:
    36
    Просмотров:
    2.060
    Root
    23 окт 2017
  5. Burt

    Новая пагинация ЯМ + прокси

    Burt, 16 окт 2017, в разделе: Решение различных задач по парсингу
    Ответов:
    7
    Просмотров:
    579
    kagorec
    17 окт 2017
Загрузка...

Поделиться этой страницей