Решения по парсингу популярных сайтов

Парсинг с Ozon.ru

invalid@example.com (MaiLady) — Fri, 08 Aug 2025 13:39:02 +0000

При попытке парсинга с сайта ozon.ru программа пишет Additional security check is required content downloader, контент не отображается. Это как-то можно решить?

Парсинг Озон

invalid@example.com (Nikita_988) — Fri, 08 Aug 2025 13:36:17 +0000

Здравствуйте!

Есть ли рабочая схема парсинга карточек товаров с ОЗОН?

Нашел на форуме способ с авторизацией парсинга в монопотоке, но это работает не стабильно, да и долгое решение.

Буду признателен за помощь!

Парсинг WB

invalid@example.com (enbond) — Fri, 08 Aug 2025 13:33:32 +0000

Приветствую!
Что-то на WB недавно изменилось и теперь не получается товары спарсить, может кто подскажет способ?
Проблема в том, что сами товары не подгружаются, в предпросмотре крутится иконка загрузки, в коде тоже нет информации с карточки товара.
~ Месяц назад получалось через wbapp + смена юзер агентов и заголовков, а сейчас кучу всего перепробовал - не грузится.

Парсинг WEB Archive (парсинг Веб Архива)

invalid@example.com (zyzy) — Sun, 11 Aug 2024 21:23:41 +0000

Утро доброе. Хочу спарсить сайт из веб архива.
Спарсил ссылки. Задал границы для страниц .html - все гуд.
Но тут беда страницы с ?р попросту отдает код самого веб архива
https://i.imgur.com/5TYKs4k.png
А сама страница открывается в браузере.
Пробовал ставить разные библиотеки, не помогло.
Только грузится дольше. Подскажите как быть?
Сам проект прикрепил.

Парсинг данных с карт

invalid@example.com (ulta) — Mon, 05 Aug 2024 10:03:17 +0000

Всем привет, ребята интересует вопрос. Смогу ли я спарсить гео данные по РФ в определенной категории? У кого есть опыт поделитесь, сколько по времени работает.
Интересует 2гис, яндекс, гугл.

яндекс маркет, открывается у вас в WBApp ?

invalid@example.com (Anton6456) — Wed, 08 May 2024 19:31:00 +0000

может кто проверить открывается нормально яндекс маркет в WBApp ?
у меня не отображается фильтр категорий, бывает отображается но при обновлении страницы сразу пропадает и паказывает всё не корректно
--
как мне кажется нужно обновлять хромиум версию

яндекс маркет - перестал парситься

invalid@example.com (Anton6456) — Sun, 31 Mar 2024 23:09:05 +0000

Здравствуйте, у меня одного перестало парсить яндекс маркет ?
именно не срабатывает клик по навигации страниц, после клика бесконечно грузится новый товар

Парсинг 2GIS

invalid@example.com (webstep) — Fri, 15 Mar 2024 21:03:06 +0000

Всем привет.

С заголовка темы понятно, что даже при передаче заголовков и кукис не происходит правильный сбор ссылок, а именно , переход на любую страницу выше 7 невозможен с сылки.

https://2gis.ua/kiev/search/Кафе/rubricId/161/
https://2gis.ua/kiev/search/Кафе/rubricId/161/page/7
https://2gis.ua/kiev/search/Кафе/rubricId/161/page/10
То есть 8 и выше страницы даже с браузера открыть нельзя. Только переходом по кнопках...

Парсинг 2GIS

Как собрать отзывы с Яндекс карт

invalid@example.com (heagar) — Fri, 01 Mar 2024 08:12:18 +0000

__________________________________________________________________________

1. Внутри карточки любой организации Яндекс Карт, чтобы отзывы начали выводиться в html коде необходимо нажать на кнопку "Отзывы".

Посмотреть вложение 10458

После чего выводится только 3 отзыва:

Посмотреть вложение 10459

При прокручивания до конца третьего отзыва с помощью скролла мыши - начинают дополнительно догружаются ещё 47 отзывов. Что в сумме приводит к 50 отзывам.

Далее после пролистывания с...

Как собрать отзывы с Яндекс карт

Ozon + WBAppCEF (Парсинг кол-ва товаров)

invalid@example.com (kadishev1997) — Mon, 08 Jan 2024 08:33:47 +0000

Здравствуйте!

Стоит задача - собрать кол-во остатков товаров с OZON.
Нашел обработку данных через WBAppCEF 2 способами:
1й - Задать цикличность кликов по товару, пока не будет значения "В наличии больше нет" и закончить обработку одной страницы.

Посмотреть вложение 7699

2й - через корзину, прописывать максимальное кол-во товаров (у Ozon это 999) и получать максимальное наличие товара (например прописал 999, а обработалось и осталось 248)

Посмотреть вложение 7700

По первому пункту в...

Ozon + WBAppCEF (Парсинг кол-ва товаров)

Как парсить количество покупок товаров в Wildberries

invalid@example.com (Trenikola) — Thu, 04 Jan 2024 19:33:24 +0000

Добрый день!
Пробую "освоить" наш "великий" маркет-плейс "Дикий"берриз
Все пока лайтово, кроме подгрузки скрипта в карточке товара "Купили "более N" раз"
Посмотреть вложение 7903
https://www.wildberries.ru/catalog/284158/detail.aspx?targetUrl=GP

При настройке скрипт отрабатывается , но при записи контента "большой болт". С wbapp тоже пусто
Чем лучше "победить" ?
На всякий случай прикрепил мини проект

Как подменить заголовок referer

invalid@example.com (AirPaimon) — Fri, 08 Dec 2023 11:28:42 +0000

Добрый вечер! Подскажите пожалуйста, как в программе подменить заголовок referer? Есть список ссылок на видео Vimeo вида https://player.vimeo.com/video/9999999999, которые, если открывать напрямую, выдают "Частное видео". Открыть их можно только если сделать на них переход с определенного сайта, то есть необходимо подменить заголовок referer на домен, с которого можно просматривать эти видео как это делает расширение Referer Control. Данный домен известен, а вот как реализовать...

Как подменить заголовок referer

Не срабатывает шаблон для парсинга изображений из Яндекс.Картинки

invalid@example.com (Luna) — Sun, 03 Dec 2023 18:55:55 +0000

Здравствуйте!
Пользовалась шаблоном для парсинга изображений с Яндекс.Картинок. Пару месяцев назад всё работало нормально. Сейчас после парсинга создаются пустые папки, изображений в них нет. Может кто-то проверить у себя и помочь подправить шаблон, если дело в нём?

Подмена заголовка referer

invalid@example.com (AirPaimon) — Sun, 20 Aug 2023 16:55:32 +0000

Добрый вечер! Подскажите пожалуйста как произвести подмену заголовка referer на сайте kinescope.io? Пробовал прописывать значение referer в custom headers, копировал заголовки запроса из firefox и вставлял в custom headers, но видео не открывает, выдает access forbidden. Однако через расширение Referer Control видео открывается без проблем. Помогите пожалуйста решить данную проблему.

яндекс маркет зависает парсинг

invalid@example.com (Anton6456) — Thu, 10 Aug 2023 10:59:45 +0000

постоянно зависает парсинг яндекс маркета в WBAPP
проблема связанная с java как я понимаю она в WBAPP зависает
авторизация с кликом по иконки ключик также виснет, стоит колесико загрузки всё

Парсинг сайтов типа https://ru.savefrom.net

invalid@example.com (Arkhimed86) — Wed, 09 Aug 2023 11:33:57 +0000

Как парсить ссылки для скачивания потоков видео с этого сайта https://ru.savefrom.net/240/ , используя библиотеку requests Python?
Ссылки появляются через несколько секунд после того, как вставляешь ссылку на видео с Ютуба в поле ввода на этом сайте. Причём не надо нажимать Enter или какую-то кнопку на сайте, а просто ожидаешь 2-3 секунды и появляются требуемые ссылки. Как указать в коде парсера состояние сайта, в котором он уже выдал ссылки на видеопотоки?

Как получить дату первого отзыва на Wildberries после того, как я изменил сортировку?

invalid@example.com (mavar) — Wed, 22 Mar 2023 15:11:54 +0000

На странице https://www.wildberries.ru/catalog/3417697/detail.aspx?targetUrl=EX
хочу получить дату первого отзыва.

Но не могу найти в коде эту дату. Какие есть варианты для получения даты?

P.S. как вариант, такой способ. Я смог при помощи JavaScript получить дату в переменную, но не понял, как передать значение переменной из JavaScript в HTML-код.

Буду признателен за любую помощь.

Выгрузка цен с сайта

invalid@example.com (vportfolio) — Thu, 16 Mar 2023 03:03:08 +0000

Здравствуйте, подскажите пожалуйста, возможно ли при парсинге цен с сайта, вычесть от цены определенный процент, например, в файл csv при парсинге цен выгружается цена 6000 - мы добавляем вторую ячейку в файле csv, но уже с ценой 5 280 и она уже формируется с учетом скидки -12%. Возможно ли это сделать?

Парсинг превью видео mp4 в vk

invalid@example.com (User123) — Wed, 07 Dec 2022 14:27:54 +0000

Например если открыть группу
https://vk.com/video/@kinoz

посмотреть коды блоков с видео, то можно увидеть такой код

https://vkvd181.mycdn.me/?sig=GJdv2...=512000384397&id=2935037889278&type=1" loop="">

ссылка в данном...

Парсинг превью видео mp4 в vk

Парсинг facebook marketplace

invalid@example.com (Василий) — Wed, 23 Nov 2022 06:29:03 +0000

Есть facebook marketplace с товарам. Например вот:...

Парсинг facebook marketplace