Парсинг сайта на WP с полной прогрузкой кода

Тема в разделе "Решение различных задач по парсингу", создана пользователем kadishev1997, 16 авг 2019.

  1. kadishev1997

    kadishev1997 Well-Known Member Пользователи

    Регистрация:
    27 мар 2019
    Сообщения:
    310
    Доброго дня!
    Имеется сайт soulfitnes.ru
    Нужно тянуть с него полную информацию о товарах, вот пример одного из товаров:
    (Ссылки недоступны для гостей)

    Загвоздка стоит в том, что через WBApp все работает прекрасно, код подгружается в нужном виде.
    Но хотелось бы подтягивать полный код через GETMORECONTENT или подобного формата макросы.
    Перерыл все POST-запросы, не смог найти
    Подскажите, есть ли альтернативы подтягивать полный код другим способом (не через WBApp), лиоб же если найдется нужный GET или POST-запрос (который возможно я проглядел), который можно запустить через нужный макрос?
     
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Какая именно информация отсутствует в коде?
     
  3. kadishev1997

    kadishev1997 Well-Known Member Пользователи

    Регистрация:
    27 мар 2019
    Сообщения:
    310
    Начиная с наименования товара, и заканчивая ее характеристиками.

    По сути, в код прогружаются исполняемый текст js, css и других от WP и WooCommerse (как это понимаю я, по крайней мере), они почти все находятся в GET-запросах. Обработка идёт только библиотекой WIN

    Нормально прогружаются только изображения товара.
     
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    А это что?

    2019-08-17_06-49-10.png
     
  5. kadishev1997

    kadishev1997 Well-Known Member Пользователи

    Регистрация:
    27 мар 2019
    Сообщения:
    310
    Странно, у меня даже заголовки не прогружаются в принципе.

    Есть возможность скинуть проект с настройками? Или что было изменено в программе, что отображение у вас работает нормально?
     
  6. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    При создании нового проекта без проблем все загружается.
     

    Вложения:

    kadishev1997 нравится это.
  7. kadishev1997

    kadishev1997 Well-Known Member Пользователи

    Регистрация:
    27 мар 2019
    Сообщения:
    310
    Принято! Спасибо за оперативную помощь, как всегда лучшие :):):)
     

Поделиться этой страницей