Прокси для Яндекса

Discussion in 'Решение проблем с использованием программы' started by Djahat, Jul 25, 2015.

  1. Djahat

    Djahat Well-Known Member Пользователи

    Joined:
    Jan 14, 2013
    Messages:
    543
    Город:
    Мордор
    Доброго времени суток.

    Парни кто юзал прокси для парсинга яндекса ? - где взять реально рабочие, чтоб яндекс не кидал капчу?
     
    Djahat, Jul 25, 2015
    #1
  2. kagorec

    kagorec Администратор Staff Member Администратор

    Joined:
    Jan 3, 2011
    Messages:
    4,442
    Location:
    Latvia
    fineproxy и т.д. - для яндекса и авито нормальные проксики.
     
    Last edited: Jul 25, 2015
    kagorec, Jul 25, 2015
    #2
  3. Djahat

    Djahat Well-Known Member Пользователи

    Joined:
    Jan 14, 2013
    Messages:
    543
    Город:
    Мордор
    Спасибо, поздно прочел - взял на проксибоксе , там за 4$ на 10 дней 70 хотя если маштабно парсить, то файнпрокси будет выгодней :)
     
    Djahat, Jul 28, 2015
    #3
  4. Orvin

    Orvin New Member Пользователи

    Joined:
    Jul 6, 2015
    Messages:
    28
    Всем привет! Взял бесплатный список прокси отсюда
    Hidden Content:
    **Hidden Content: To see this hidden content your post count must be 1 or greater.**
    от 2015-08-20 08:01:07 загрузил в программу:

    Hidden Content:
    **Hidden Content: To see this hidden content your post count must be 1 or greater.**
    при настройке границ парсинга пишется: Программе не удалось загрузить WEB-страницу (Connection Closed Gracefully)

    что сделано не так?
     
    Orvin, Aug 20, 2015
    #4
  5. kagorec

    kagorec Администратор Staff Member Администратор

    Joined:
    Jan 3, 2011
    Messages:
    4,442
    Location:
    Latvia
    Дальше не имеет смысла читать ибо с бесплатным списком прокси вы ничего толково не распарсите. Кратко говоря они ненадежные, мало того что прозрачные (не скрывают ваш ип), и становятся быстро неактуальными.
     
    kagorec, Aug 20, 2015
    #5
  6. Orvin

    Orvin New Member Пользователи

    Joined:
    Jul 6, 2015
    Messages:
    28
    понял, спасибо

    может кто нибудь знает, после сканирования сайта (ставил на ночь) сервер теперь для моего айпишника выдает ошибку 429, можно это как то обойти без использования прокси?
     
    Orvin, Aug 20, 2015
    #6
  7. kagorec

    kagorec Администратор Staff Member Администратор

    Joined:
    Jan 3, 2011
    Messages:
    4,442
    Location:
    Latvia
    kagorec, Aug 20, 2015
    #7
  8. Orvin

    Orvin New Member Пользователи

    Joined:
    Jul 6, 2015
    Messages:
    28
    заработало только на половину, исходный код в окне настройки парсинга отображается, а сама страница нет

    прописал порты с explorer все заработало, спасибо )

    поспешил радоваться, как то странно получается, страницу в таком случае прогружает, а в верху пишет ошибку уже самого движка сайта:

    [​IMG]

    но это ошибка наверно уже со стороны самого сайта...
     
    Last edited: Aug 20, 2015
    Orvin, Aug 20, 2015
    #8
  9. Orvin

    Orvin New Member Пользователи

    Joined:
    Jul 6, 2015
    Messages:
    28
    прикольно перезагрузил адвор пока заработало

    в общем как то странно через эту програмулину (advor) работает, возможно это со стороны движка, хотя в explorer встроенный полностью страница грузится, но в исходный код ошибка bitrix вместо которой должен быть весь смак

    <pre>[oopException]
    locationName is not defined (0)
    /home/bitrix/www/bitrix/modules/oop/classes/general/locator.php:100
    #0: oopLocator-&gt;getCurrentName()
    /home/bitrix/www/bitrix/templates/ver30/components/bitrix/catalog/.default/bitrix/catalog.element/.default/result_modifier.php:168
    #1: include(string)
    /home/bitrix/www/bitrix/modules/main/classes/general/component_template.php:664
    #2: CBitrixComponentTemplate-&gt;__IncludeMutatorFile(array, array)
    /home/bitrix/www/bitrix/modules/main/classes/general/component_template.php:587
    #3: CBitrixComponentTemplate-&gt;IncludeTemplate(array)
    /home/bitrix/www/bitrix/modules/main/classes/general/component.php:657
    #4: CBitrixComponent-&gt;showComponentTemplate()
    /home/bitrix/www/bitrix/modules/main/classes/general/component.php:605
    #5: CBitrixComponent-&gt;includeComponentTemplate()
    /home/bitrix/www/bitrix/components/bitrix/catalog.element/component.php:1040
    #6: include(string)
    /home/bitrix/www/bitrix/modules/main/classes/general/component.php:535
    #7: CBitrixComponent-&gt;__includeComponent()
    /home/bitrix/www/bitrix/modules/main/classes/general/component.php:578
    #8: CBitrixComponent-&gt;includeComponent(string, array, object)
    /home/bitrix/www/bitrix/modules/main/classes/general/main.php:1032
    #9: CAllMain-&gt;IncludeComponent(string, string, array, object)
    /home/bitrix/www/bitrix/templates/ver30/components/bitrix/catalog/.default/element.php:346
    #10: include(string)
    /home/bitrix/www/bitrix/modules/main/classes/general/component_template.php:535
    #11: CBitrixComponentTemplate-&gt;__IncludePHPTemplate(array, array, string)
    /home/bitrix/www/bitrix/modules/main/classes/general/component_template.php:618
    #12: CBitrixComponentTemplate-&gt;IncludeTemplate(array)
    /home/bitrix/www/bitrix/modules/main/classes/general/component.php:657
    #13: CBitrixComponent-&gt;showComponentTemplate()
    /home/bitrix/www/bitrix/modules/main/classes/general/component.php:605
    #14: CBitrixComponent-&gt;includeComponentTemplate(string)
    /home/bitrix/www/bitrix/components/bitrix/catalog/component.php:134
    #15: include(string)
    /home/bitrix/www/bitrix/modules/main/classes/general/component.php:535
    #16: CBitrixComponent-&gt;__includeComponent()
    /home/bitrix/www/bitrix/modules/main/classes/general/component.php:578
    #17: CBitrixComponent-&gt;includeComponent(string, array, boolean)
    /home/bitrix/www/bitrix/modules/main/classes/general/main.php:1032
    #18: CAllMain-&gt;IncludeComponent(string, string, array, boolean)
    /home/bitrix/www/catalog/index.php:2325
    #19: include_once(string)
    /home/bitrix/www/bitrix/modules/main/include/urlrewrite.php:154
    #20: include_once(string)
    /home/bitrix/www/bitrix/urlrewrite.php:2
    </pre>
     
    Last edited: Aug 20, 2015
    Orvin, Aug 20, 2015
    #9
  10. Orvin

    Orvin New Member Пользователи

    Joined:
    Jul 6, 2015
    Messages:
    28
    наверно это уже вопрос к разработчикам Content Downloader...
     
    Orvin, Aug 20, 2015
    #10
Similar Threads
  1. Valiks

    Перестали работать прокси

    Valiks, Jan 18, 2012, in forum: Решение проблем с использованием программы
    Replies:
    18
    Views:
    11,454
    kagorec
    Apr 11, 2020
  2. lexalevi4

    Прокси с паролями

    lexalevi4, May 29, 2012, in forum: Функции и интерфейс программы
    Replies:
    2
    Views:
    2,128
    lexalevi4
    May 31, 2012
  3. Akok06

    Парсинг сниппетов Яндекса.

    Akok06, Jan 30, 2013, in forum: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Replies:
    2
    Views:
    2,303
    Akok06
    Feb 1, 2013
  4. СТЕПАН

    Проверка прокси на бан

    СТЕПАН, Mar 13, 2013, in forum: Решение проблем с использованием программы
    Replies:
    2
    Views:
    3,875
    СТЕПАН
    Mar 13, 2013
  5. FaSTeR

    Парсинг прямого эфира яндекса

    FaSTeR, Sep 30, 2015, in forum: Решения по парсингу популярных сайтов
    Replies:
    3
    Views:
    2,143
    Root
    Oct 1, 2015
Loading...

Share This Page