Не на всех страницах подгружаются данные

Тема в разделе "WBAppCEF", создана пользователем Konstantsin, 4 май 2021.

  1. Konstantsin

    Konstantsin New Member Пользователи

    Регистрация:
    4 май 2021
    Сообщения:
    11
    Через программу не на всех страницах данные подгружаются. Впервые с таким сталкиваюсь. За более чем 5 лет первый раз трабл возник, который мне мозг вывихивает, вправьте пожалуйста.o_O
     

    Вложения:

  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Ссылки недоступны для гостей
     

    Вложения:

  3. Konstantsin

    Konstantsin New Member Пользователи

    Регистрация:
    4 май 2021
    Сообщения:
    11
    Вот об этом я и говорю: не забираются данные почта, мэйл(( Я уже из сил выбился.
    Точнее они забираются в 10% случаев. Предполагаю, что нужно вставить проверку условия вернул ли сайт значения границ парсинга отличные от троеточия и если да, то продолжить, а если нет - повторить запрос. Но вот где та настройка я ещё не допёр.

    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
     
    Последнее редактирование: 5 май 2021
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Вроде так.

    Добавил в проект WBAppCEF проверку на наличие троеточия, где должен быть телефон.
     

    Вложения:

  5. Konstantsin

    Konstantsin New Member Пользователи

    Регистрация:
    4 май 2021
    Сообщения:
    11
    Теперь проект зацикливается. Страница осуществляет вечную проверку. Но суть в том, что если при загрузке страницы данные не подгрузились, то они уже и не подгрузятся.
     
  6. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Попробуйте.
     

    Вложения:

  7. Konstantsin

    Konstantsin New Member Пользователи

    Регистрация:
    4 май 2021
    Сообщения:
    11
    Спасибо вам огромное за ваш продукт (та работа, которую вы проделали и те функции которые реализовали позволяют ставить CD на один уровень с продуктами ADOBE), за тот уровень поддержки пользователей, который вот уже долгие годы остаётся примером того, "как надо", за огромный труд над созданием инструкций - никогда и ни где такого не встречал.

    Очевидно придётся ручками собирать эти данные )) Добавляет троеточие в результат.(( ну а как выколупать по post запросу к
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    ответ я допру слишком поздно.
     
  8. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    К адресу
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Выполняется POST запрос с передачей множества сгенерированных данных
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Так что целесообразнее парсить это дело через браузер WBAppCEF (так как подобные токены сгенерировать практически нереально).

    Я заметил, что поначалу сайт отдает контакты нормально. Нужно получше изучить его поведение, возможно, подобрать паузу между запросами или использовать список прокси.
     
Similar Threads
  1. rhjirftyjn
    Ответов:
    1
    Просмотров:
    809
  2. weresa
    Ответов:
    22
    Просмотров:
    1.292
  3. Grafin
    Ответов:
    17
    Просмотров:
    689
  4. Root
    Ответов:
    1
    Просмотров:
    577
  5. Sergio37
    Ответов:
    3
    Просмотров:
    314
Загрузка...

Поделиться этой страницей