Как парсить сайт, который работает с использованием фреймворка Angular

Тема в разделе "Решение проблем с загрузкой WEB-страниц", создана пользователем yans01, 14 мар 2020.

Метки:
  1. yans01

    yans01 New Member Пользователи

    Регистрация:
    28 мар 2018
    Сообщения:
    29
    Город:
    Бишкек
    Всем, привет!
    Парсил сайт lalafo.kg, все было хорошо, до того момента, пока разработчики этого сайта не изменили, способ генерации страниц.
    Сейчас сервер по запросу передает в браузер данные, которые затем обрабатываются на стороне браузера, генерируя саму страницу. Например, так работают сайты, с использованием фреймворк Angular.
    В результате парсер перестал работать как надо (см. скриншот).
    Прошу помочь, мне решить эту проблему.
     

    Вложения:

    yans01, 14 мар 2020
    #1
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Ссылки недоступны для гостей
     
    Root, 14 мар 2020
    #2
  3. yans01

    yans01 New Member Пользователи

    Регистрация:
    28 мар 2018
    Сообщения:
    29
    Город:
    Бишкек
     

    Вложения:

    yans01, 14 мар 2020
    #3
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Плохо смотрите систему помощи.
     
    Root, 14 мар 2020
    #4
  5. yans01

    yans01 New Member Пользователи

    Регистрация:
    28 мар 2018
    Сообщения:
    29
    Город:
    Бишкек
    Спасибо, за помощь. Вопрос решил
     
    yans01, 14 мар 2020
    #5
    Root нравится это.
  6. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Также обратите внимание на проверку готовности загрузки WEB страницы с помощью Observer.
     
    Root, 14 мар 2020
    #6
  7. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.433
    Адрес:
    Latvia
    Как обычный сайт, в программе весь код доступен с элементами объявлений, границы парсинга вполне можно указать.
    [​IMG]
     
    Последнее редактирование: 14 мар 2020
    kagorec, 14 мар 2020
    #7
  8. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    Как разработчик таких проектов, скажу что все намного проше и быстрее. Просто парсите их API.

    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 5 постов.**
     
    Последнее редактирование: 18 мар 2020
    napserious, 18 мар 2020
    #8
    kadishev1997 и kagorec нравится это.
Similar Threads
  1. Djahat

    Как парсить контент - который вызывается php ?

    Djahat, 10 фев 2013, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    24
    Просмотров:
    4.824
    Djahat
    18 фев 2013
  2. мастер ломастер

    Как парсить с использованием [GROUPNAME] + динамические границы + GETMORECONTENT

    мастер ломастер, 6 июл 2015, в разделе: Решение различных задач по парсингу
    Ответов:
    1
    Просмотров:
    730
    Root
    7 июл 2015
  3. pavelbe

    <CD_DOCURL!> - как узнать URL на который переадресовывает сайт?

    pavelbe, 8 окт 2015, в разделе: Функции и интерфейс программы
    Ответов:
    6
    Просмотров:
    1.359
    Root
    9 окт 2015
  4. GreenWay

    Не работает парсер ссылок через WBApp с использованием прокси

    GreenWay, 7 дек 2015, в разделе: Решение проблем с использованием программы
    Ответов:
    3
    Просмотров:
    1.341
    GreenWay
    8 дек 2015
  5. Felix_b

    Со временем перестает парсить через список прокси

    Felix_b, 29 дек 2017, в разделе: Решение проблем с использованием программы
    Ответов:
    2
    Просмотров:
    722
    Felix_b
    30 дек 2017
Загрузка...

Поделиться этой страницей