Ошибка: Не найдено ни одной новой ссылки

Поиск ошибки не дал результатов.
При парсинге сайта во вкладке Ссылки, первая страница парсится удачно, а последующие парсер видит как предыдущую и выдаёт сообщения "Не найдено ни одной новой ссылки". Стоит галочка DOM ссылки
пример ссылки для парсинга Ссылки недоступны для гостей

 

Увеличил таймаут проверки загрузки, заработало, послежу ещё

 

Здравствуйте.

Ссылки недоступны для гостей

 

Здравствуйте,
Спасибо, карта сайта если что пригодится, но она у них давно не обновлялась и новых товаров там нет
Таймаут проверки в итоге работает через раз

 

Ссылки недоступны для гостей первое видео

 

Добрый день! Антологичная проблема - интернет магазин минилаб раздел металоискатели, сгенерированы ссылки по пагинации, выставленна глубина ссылок 5-5, при парсинге собираются ссылки с первой страницы на других соответственно ошибка: Не найдено ни одной новой ссылки

Скрытое содержимое:

**Скрытое содержимое: доступно при наличии 1 постов.**

В настройках фильтра указаны только глубина ссылок (на товар).
Лог: Ссылки недоступны для гостей

 

Ну так то верно, зачем разбираться в URL. Зачем понимать, что для обычного запроса все, что после символа решетки - безразлично.

Скрытое содержимое:

**Скрытое содержимое: доступно при наличии 1 постов.**

 

1. Откуда взялась данная ссылка?
2.При переходе какая то кракозябра
3. По шрифту я вижу что для вас это какой то тупой вопрос как для разработчика но во всех инструкциях о данной проблеме не слова я за последнию неделю около сотни видео просмотрел но тщетно, аналогичная проблема была и с сайтом ДНСом, если затрудняетесь объяснить дайте ссылку на паблик где можно разобраться с данной проблемой

 

1) Ссылка берется из монитора сети Firefox Ссылки недоступны для гостей
2) Это не "кракозябра", а JSON ответ с нужными данными
3) Закономерное явление, столько отвечать на форуме на одни и те же вопросы без какой-то дополнительной оплаты. Странно, что еще отвечаю. Это не призыв платить, за ответы на форуме, просто поясняю ситуацию. Такая деформация поведения является закономерной в таких вот условиях.

 

Хорошо вопрос такой сколько будет стоить видео запись от А до Я по полному парсингу подобных сайтов? нужно разбираться а то год когда она просто мертвым грузом весит как то не ахти
Ну и с вас я думаю это большинство вопросов снимет можете отправлять по ссылке

 

Видео с подобными темами полно, в системе помощи материалы есть по данным вопросам. Но вот досада, они не помогают большинству людей.

 

Я встречал вычесление отдельных элементов (как например в вашем видео Связной где вы показываете как правильно делать ожидание загрузки сайта и с кнопкой корзина), а так же видео когда при переходе не менялась ссылка, но вот оч много сайтов это как раз как пример с минилабом dns, м-видео и еще куча, когда вроде и ссылка меняется и вроде все ок и html теги вроде есть но ни чего хорошего не происходит, видео полезно по крайней мере научился парсить некоторые сайты (то что после посещения этих сайтов почему то хочется помыть руки я промолчу) это не бесполезный труд. Но большинству необходим пример, привычка учится усваивать по видео 10 раз сделал по видео далее сам. Прога действительно хорошая и аналогов не видел но звезда какая сложная)

 

Конкретно по сборку ссылок в категории.
Можно сделать парсинг ссылок, не используя сканер.

Генерируете список
num - от 1 до 15
key - #/page-

Ссылки недоступны для гостей

Далее выбираете границу парсинга - ссылка на товар и запускаете в 1 поток с интервалом 1 секунда, потому что сайт будет банить за частые запросы.
В идеале парсить со ссылки, которая будет показывать все товары, благо есть такая кнопка на странице.
Конкретно у металлоискателей такая Ссылки недоступны для гостей

Во вложении настройка и пример парсинга. Все ссылки собраны