Как парсить белорусский сайт

Тема в разделе "Решение различных задач по парсингу", создана пользователем weresa, 15 июн 2018.

  1. weresa

    weresa Active Member Пользователи

    Регистрация:
    14 сен 2014
    Сообщения:
    237
    Добрый день.
    Подскажите, как нужно парсить белорусский сайт belpodium.by , если он и в браузере и в самой программе переключается на belpodium.ru
    Сайты отличаются составом каталогов. Необходим именно белорусский...
     
  2. inotoxic

    inotoxic Well-Known Member Пользователи

    Регистрация:
    13 сен 2015
    Сообщения:
    867
    Попробуйте в настройках HTTP заголовков отключить обрабатывание редиректов
    [​IMG]
    или же использовать белорусские proxy
     
    xLime нравится это.
  3. Джо

    Джо New Member Пользователи

    Регистрация:
    20 дек 2015
    Сообщения:
    10
    Город:
    Курск
    Необязательно именно белорусские прокси. Условие - парсить с IP, у которых геопривязка - не РФ. Тогда редиректа на belpodium.ru происходить не будет. Попробовал зайти через VPN c USA IP на сайт, как и предполагалось, редиректа на российскую версию не происходит.
     
    xLime и weresa нравится это.

Поделиться этой страницей