Защита от парсинга - Сайт делает гет запрос на каждую страницу

Тема в разделе "Парсинг конкретных сайтов по запросу (ПЛАТНО)", создана пользователем QuZ, 18 окт 2017.

  1. QuZ

    QuZ New Member Пользователи

    Регистрация:
    28 янв 2012
    Сообщения:
    32
    Добрый день. Имеется один сайт, который меня немного уже достал. При опытке загрузить страницу, данный сайт для защиты - делает перенаправление на страничку, добавляя параметры гет запроса ( я сейчас на стадии получения ссылок в сканере сайта)

    Поможет кто победить данный сайт?

    Да, сразу p.s. WBApp ом ранее не пользовался, уже 40-ковой час работаю в 10-ть поток с сайтом, вопреки предупреждению, что работать надо в 2-ва потока. Какие могут быть проблемы? И откуда взялось такое ограничение.
    Спасибо.
     

    Вложения:

    QuZ, 18 окт 2017
    #1
Similar Threads
  1. smartay

    Защита от парсинга на kinopoisk.ru?

    smartay, 20 мар 2013, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    5
    Просмотров:
    3.770
    smartay
    21 мар 2013
  2. Aning

    Интересная защита от парсинга

    Aning, 4 апр 2014, в разделе: Скачивание картинок и файлов
    Ответов:
    8
    Просмотров:
    1.681
    Aning
    4 апр 2014
  3. Reset

    PHP-скрипт - Костыль для парсинга сайтов которые отдают данные через POST запрос

    Reset, 28 ноя 2014, в разделе: Решение различных задач по парсингу
    Ответов:
    0
    Просмотров:
    1.122
    Reset
    28 ноя 2014
  4. West

    Защита от парсинга

    West, 9 янв 2015, в разделе: Парсинг во вкладке "Ссылки"
    Ответов:
    11
    Просмотров:
    2.801
    Lil
    1 апр 2022
  5. sten30

    Защита от парсинга в Битрикс. Нужно спарсить весь товар.

    sten30, 13 окт 2017, в разделе: Решение различных задач по парсингу
    Ответов:
    5
    Просмотров:
    1.502
    Kreol
    1 ноя 2019
Загрузка...

Поделиться этой страницей