не показываются отзывы

Тема в разделе "Подгрузка данных, которых нет в коде WEB-документа", создана пользователем Funnytattoo, 5 дек 2018.

  1. Funnytattoo

    Funnytattoo New Member Пользователи

    Регистрация:
    3 фев 2017
    Сообщения:
    30
    подскажите, на вкладке авторизации сайт откравается с отзывами, но при парсинге нет блока отзывов товара в коде страницы
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    при переходе между страницами отзывов ссылка не изменяется
    что я упускаю?
     
    Последнее редактирование: 5 дек 2018
  2. inotoxic

    inotoxic Well-Known Member Пользователи

    Регистрация:
    13 сен 2015
    Сообщения:
    867
    Настройки HTTP - запросов программы (ctr+h)
    поставить галочку на чекбоксе - "контент"
     
  3. Funnytattoo

    Funnytattoo New Member Пользователи

    Регистрация:
    3 фев 2017
    Сообщения:
    30
    вроде заработало, не знаю может ком тормозил, а не подскажите как переключать страницы подгружаемые скриптом так мне на каждую нужно отдельный блок писать в wbapp
    [GETHTML]
    [CLICK][innerhtml][N]0[/N][FULL]:2
    [CLICK][innerhtml][N]0[/N][FULL][ET_FOCUS]:2
    [CLICK][innerhtml][N]0[/N][FULL]:2

    так не работает
    [GETHTML]
    [CLICK][innerhtml][N]0[/N][FULL]:{skip}
    [CLICK][innerhtml][N]0[/N][FULL][ET_FOCUS]:{skip}
    [CLICK][innerhtml][N]0[/N][FULL]:{skip}

    работает так
    [GETHTML]
    [CLICK][innerhtml][N]0[/N][FULL]:2
    [CLICK][innerhtml][N]0[/N][FULL][ET_FOCUS]:2
    [CLICK][innerhtml][N]0[/N][FULL]:2
    [GETHTML]
    [CLICK][innerhtml][N]0[/N][FULL]:3
    [CLICK][innerhtml][N]0[/N][FULL][ET_FOCUS]:3
    [CLICK][innerhtml][N]0[/N][FULL]:3

    но как-то может можно для каждой страницы прописать формулой значения?
     
    Последнее редактирование: 5 дек 2018
  4. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    курим что такое post запросы
    вот ссылка
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    вот post данные
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    где 2 это ваша страница
    подробнее можно тут посмотреть Ссылки недоступны для гостей
     
  5. Funnytattoo

    Funnytattoo New Member Пользователи

    Регистрация:
    3 фев 2017
    Сообщения:
    30
    прописала генерацию ссылок в виде Ссылки недоступны для гостей

    запрос
    methods=[{"method":"reviews","params":{"page":[PARAM],"host-widget":"main_widget","is_mobile":false,"pictures_per_review":3,"pid":"178587261"}}]&app_key=ddY0OFQeb180KIjdOe65vsRoSyC0DK2Mo50L3vhX&is_mobile=false&widget_version=2018-08-21_14-24-18

    но при тестировании выдает
    Ссылки недоступны для гостей
    Не отфильтровано ни одной ссылки!
    почему?
     
  6. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    ну видимо надо посмотреть код, увидеть что там json привести его в нормальный вид
    и я совсем не понял какие ссылки вы хотите получить, на картинке покажите.
     
  7. Funnytattoo

    Funnytattoo New Member Пользователи

    Регистрация:
    3 фев 2017
    Сообщения:
    30
    я хочу как в этом видео чтобы подгружался код с отзывами при перекликивании страниц, чтобы парсить текст отзывов

    в wbapp точно нет возможности вместо номера страницы подставлать параметр как-то?
     
  8. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    там есть отзывы, просто по тексту поищите
     

    Вложения:

  9. Funnytattoo

    Funnytattoo New Member Пользователи

    Регистрация:
    3 фев 2017
    Сообщения:
    30
    а можете посмотреть чем отличатся Ваш файл от моего, тк мне кажется у меня все также прописано, но не работает
     

    Вложения:

  10. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    Вы разберитесь для начала что именно вам нужно)
    Вы говорите, нужны отзывы. при этом хотите ссылки, непонятно куда и непонятно зачем.
    В моем проекте при настройке парсинга отзывы есть в коде. в вашем они точно так же есть
    вы забываете что поиск ссылок происходит в таких границах href="{get}"
    а если вы посмотрите код, о чем я вам и говорил, то заметите, что там идет вот так href=\"
    и само собой " не равно \" значит надо это внести в предварительную обработку кода.
     
  11. Funnytattoo

    Funnytattoo New Member Пользователи

    Регистрация:
    3 фев 2017
    Сообщения:
    30
    значит надо это внести в предварительную обработку кода это мне не понятно как сделать
    Короче ... или длиннее может, но мы не ищем легких путей)
    СУТЬ нужно спарсить базу отзывов с именами и датами для пертасовки и создания похожей базы для магизина, мне не нужны их ссылки

    с POST запросами мне не понятно как-то и там не вижу данных имени и даты отзыва, решила делать через wbapp

    чтобы сгенерировать лист команд вида
    [GETHTML]
    [CLICK][innerhtml][N]0[/N][FULL]:2
    [CLICK][innerhtml][N]0[/N][FULL][ET_FOCUS]:2
    [CLICK][innerhtml][N]0[/N][FULL]:2
    [GETHTML]
    [CLICK][innerhtml][N]0[/N][FULL]:3
    [CLICK][innerhtml][N]0[/N][FULL][ET_FOCUS]:3
    [CLICK][innerhtml][N]0[/N][FULL]:3
    и тд до 155 страниц для самого отзывчивавого товара 1544 отзава (10 на страницу)

    через функционал генерации ссылок генерим
    {num} с нулями, чтобы сортировалось от 1 до 155, потом заменяем в экселе 000
    {num}a-0;;[GETHTML]
    {num}a-1;[CLICK][innerhtml][N]0[/N][FULL]:{num}
    {num}a-2;[CLICK][innerhtml][N]0[/N][FULL][ET_FOCUS]:{num}
    {num}a-3;[CLICK][innerhtml][N]0[/N][FULL]:{num}
    копируем все в эксель
    сортировака по колонке А.
    разбивка по столюцам по разделителю ;
    первый стоблбец отработал нам сортировку, во втором столбце 00 заменяем на ничего, потом :0 заменяем на : , потом и получаем то что нужно wbapp
    может кому пригодится
    почему-то встречаются по 2 одинаковые строки отзывов, может где косяк в шаблоне вывода, но для моих целей подойдет

    вопрос только- ставлю 50 потоков обработка идет в 1 это не критично но почему так, тк они последовательно листаются?
     
  12. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    Да вы просто не искали
    22222.PNG 11111.PNG
    Потом проще написать, у меня падает wbapp что делать)
     
  13. Funnytattoo

    Funnytattoo New Member Пользователи

    Регистрация:
    3 фев 2017
    Сообщения:
    30
    не понимаю ваш последний комментарий, то что вы выделили, я так и делаю через wbapp - я не поняла как через POST запросы эти данные найти, тк там в ссылках увидела только сам текст комментариев.
    и wbapp кстати не падает, я просто тестировала только на ссылке 1го товара, поэтому наверное и 1 поток, тк он идет последовательно при добавлении большего колва ссылок на разные товары потоки сохраняются по 1 на каждую ссылку товара
     
    Последнее редактирование: 6 дек 2018

Поделиться этой страницей