WBAppCEF проблема с Cloudflare

На одном из доноров перестало парсить. Банально WBAppCEF не пускает Cloudflare - игры с таймаутами не дают результата.
Может у меня версия старовата
Ссылки недоступны для гостей
и надо обновлять?

 

Здается обновление ничем не поможет
Проблема в версии движка WBApp

 

Что за сайт, если не секрет?

 

В телегу скинул

 

Я так понял, что Cloudflare апнулся, а апдейт CEF не предвидится... жаль

 

у меня такая же проблема, просто каптчу от Cloudflare по кругу решаешь и все, у кого-то есть решение

 

Можно решить на платной основе

 

CD не решит проблему никаким макаром - автор забил на обновы

 

Та же проблема cloudflare не решается

 

Добрый день! Хотел уточнить, в обновленных версиях CD детектится CloudFlare защитой от ботов?

 

Здравствуйте.

Не изучал этот вопрос.

Предоставьте ссылку на сайт или товар, попробую изучить.

 

например при заходе на любую страницу discogs.com - там установили защиту от cloudflare - браузер сразу детектится и не пускает. Возможно можно было бы обойти, получив куку от WebAPP, но и тот тоже не проходит. И количество таких сайтов растет огромными темпами, увы( Посмотрите пожалуйста. Спасибо!

 

Не вижу проблем с этим сайтом.

В 1 поток даже 3000 страниц в час парсит.

 

А у меня пишет "Your browser is out of date!" при переходе в вашем проекте и не парсит. Видимо в какой-то из версий эта проблема решилась. Спасибо, буду обновляться

 

Обновился, но у меня все равно даже через webapp в Вашем проекте вылетает
"Warning Your browser is out of date!
Update your browser to view this website correctly. More Information."

 

Да это старая и известная проблема. Сейчас большинство маркетплейсов и агрегаторов сидят за CloudFlare
контент данлоадер с ним бессилен.
Было бы круто если бы автор нашел решение.
Постоянно приходится искать обход через PHP

 

Я же не придумал, что спарсил.

Специально на тесте побольше, 6000 страниц с указанного сайта снял.

Что-то не так у вас происходит, напишите мне в Telegram, расшарите экран и покажете. Решим проблему.

Скрытое содержимое:

**Скрытое содержимое: доступно при наличии 1 постов.**

 

Жду.

 

Предоставьте адреса конкретных страниц, где у вас есть такая проблема. Я вот, например, таких не наблюдаю. Есть известные мне проблемы с Яндекс Маркет и все. С остальными сайтами нормально.

 

Все просто, я сейчас проверил, проверка CF не со всех ip адресов показывается для дискогса, поэтому у вас нормально, а у меня стопорился. Но есть ресурсы, где проверка CF идет на каждый запрос от нового юзера. Обязательно найду пример и пришлю! Спасибо!