прокси не используются при парсинге ссылок из гугл, не работает антигейт

Тема в разделе "Решение проблем с использованием программы", создана пользователем konfuciy, 16 июн 2014.

  1. konfuciy

    konfuciy New Member Пользователи

    Регистрация:
    10 янв 2013
    Сообщения:
    89
    1. ввел список прокси, проверил контент даунлоадером.
    300 живых.
    поставил галку на использовать прокси при парсинге и в сканере ссылок.
    однако при парсинге при парсинге ссылок из гугл прокси не используются. это видно, так как перестают добавлятся ссылки и продолжают только после передачи новых куки.

    2. ввел ключ антигейт.
    однако при парсинге гугла капча не бьется антигейтом - прихожится вводить вручную и передавать куки.

    помогите решить данные проблемы
     
  2. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    Вы сканером парсите выдачу гугл?
     
  3. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    1) Прокси уже могут быть в бане у Гугла
    2) Для парсинга Гугла нужно использовать только платные качественные SOCKS5 прокси.

    Если парсить в 1 поток с паузой, то банить он не должен...

    Толку от того, что вы просто ввели ключ Антигейт, вот как пользоваться антикапчей Ссылки недоступны для гостей (Распознавание текста капчи с помощью сервиса Antigate)

    PS: Непонятно через какую вы библиотеку парсите: Indy, CIS, IE (DOM)?
     
  4. konfuciy

    konfuciy New Member Пользователи

    Регистрация:
    10 янв 2013
    Сообщения:
    89
    да, я сканером парсю ссылки и выдачи гугла, очень удобно
     
  5. konfuciy

    konfuciy New Member Пользователи

    Регистрация:
    10 янв 2013
    Сообщения:
    89
    в 1 поток да - но очень медленно
    прокси работают только в WBapp?
    на этой странице кстати нет описания их использования
     
  6. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Прокси работают везде, кроме как в WBApp =)
    Ответы вам дал и пояснил, пользуйтесь...

     
  7. konfuciy

    konfuciy New Member Пользователи

    Регистрация:
    10 янв 2013
    Сообщения:
    89
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
     
    Последнее редактирование: 21 июл 2014

Поделиться этой страницей