Яндекс Маркет банит

Столкнулся с проблеммой парсинга выдачи Яндекса. Где то читал подробный мануал, но теперь не могу найти. Натыкаюсь на посты но всё не те.
Либо подскажите, если кто знает как менять юзер-агенты и вроде еще там было написано про куки. Вроде очищать их как то нужно было.
Заранее спасибо

 

Спасибо качну программу. Сижу мучаю яндекс. Примерно 1000-1400 ссылок выдает и все.

 

А паузу какую задаете между запросами?

 

И вот еще, можно ввести капчу и дальше парсинг пойдет! Вкладка "контент", кнопка "авторизация...".
С уважением к вам, Сергей.

 

Паузу не ставил совсем. Да я кстати так и стал делать через авторизацию и вроде парсит потихоньку. Под мои нужды думаю хватит. Еще бы капчу на antigate отправляла вобще бы классно было.

 

5000 попробуйте. И если капча уже вылетела: либо IP сменить (переподключиться к интернет, если IP динамический), либо капчу ввести...

 

Спасибо буду экспериментировать

 

Я правильно понял content downloader + Advor - Ямдиксмакет парсится отлично?
Никаких проксей и другого не надо?

 

Круто - а настроить прогу для подобного парсинга насколько сложно ?

 

Реально-ли парсить я.маркет в связке CD + AdvOR ?
Сейчас стоит задача парсить цены по определенным товарам. Пользовался своим скриптом + proxifier - яндекс зарубил купленные прокси-сервера.
Возможен-ли парсинг с учетом нужного региона "Москва"?

 

Всем привет, подниму тему по новой.

Можно гдето посмотреть инструкцию - как эту самую капчу - заантигейтить, нужно понимание хотябы на уровне процесса.

В двух словах, что куда пихать, чтобы если Янд Маркет начал вы.....ться, заткнуть его антигейтом.


Ключь антигейт у меня есть.
Проект под Парс Маркета - есть.
запускаю, на паузе 5000-11000, в 1 поток, на 300 запросе - просит капчу.

Вот с этого момента не понимаю, чем и как дополнить проект, чтобы яндекс отвалил - как скормить ему антигейт - вот вопрос.

Если кто в силах объяснить в пару строк, буду весьма признателен.

 

Здравствуйте!

Если парсите не через "Internet Explorer (DOM)" -> Ссылки недоступны для гостей
Если через "Internet Explorer (DOM)" -> Ссылки недоступны для гостей (Распознавание текста капчи с помощью сервиса Antigate)

PS: "Internet Explorer (DOM)" включается в ctrl+h! =)

 

Черт - никак не наскребу бабла, чтоб купить комп на котором можно семерку поставить и 11 експлорер - технический регрес епт

 

Всем привет
На форуме о страданиях с яндекс-маркетом написано много, поэтому не буду открывать новую тему
Использую элит SOCKS5 , но они судя по всему в черном списке у яндекса, банит весь список, в коде страниц текст про капчу.
Тот же список но через DOM, никакого бана нет, ставлю 3-5 потоков, процесс идет, скорость понятно совсем не та.
Может кто знает как это можно объяснить.