Парсинг подписчиков Инстаграмм

Тема в разделе "WBAppIE", создана пользователем Slawik, 8 мар 2018.

  1. Slawik

    Slawik New Member Пользователи

    Регистрация:
    8 фев 2018
    Сообщения:
    11
    Через ВБАпп открываю странице с подписчиками, GETHTML получаю код, но ничего в коде нет((( КАк дальше действовать?
    Помогите плиз
     
  2. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    поставьте паузу в 5 секунд или больше и все должно быть. Скорее всего просто не успевает обрабатывать код. Либо требует аунтефикации.
    Просто пустоту не должен выдавать. Что-то ведь написано.
     
    Slawik нравится это.
  3. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Также данные могут быть во фрейме
    Ссылки недоступны для гостей
     
    Slawik нравится это.
  4. Slawik

    Slawik New Member Пользователи

    Регистрация:
    8 фев 2018
    Сообщения:
    11
    Спасибо! Разобрался, но инстаграмм не дает выгрузить весь список((( из 3-х тысяч выгружает один раз 1400, второй 900, третий 2100
    Наверное лимиты у них какие-то
     
  5. Slawik

    Slawik New Member Пользователи

    Регистрация:
    8 фев 2018
    Сообщения:
    11
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 30 постов.**
    Вдруг кому-то пригодится)
     
  6. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Пожалуйста.

    Если со стороны Instagram есть какие-то лимиты, то уже ничего не поделаешь (сайт так работает).
     
  7. Serheo

    Serheo Well-Known Member Пользователи

    Регистрация:
    13 окт 2018
    Сообщения:
    251
    Город:
    Москва
    Вот тоже надо спарсить подписчиков Инсты. Выяснил, что нужные ссылки генерятся при прокручивании списка подписчиков, который выводится во всплывающем окне. Эти ссылки я получил в "Сетевом мониторе" Фаерфокс.

    Вопрос. А можно ли как-то заставить WBApp при прокрутке страницы выдавать такую же информацию как и сетевой монитор Фаерфокса и записывать все это в файл?
     
  8. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Можно прокручивать эту страницу в WBApp и она вернет все данные в Content Downloader.

    В Content Downloader возвращается код WEB-страницы на момент завершения работы WBApp (то есть со всеми подгруженными данными).
     
  9. Serheo

    Serheo Well-Known Member Пользователи

    Регистрация:
    13 окт 2018
    Сообщения:
    251
    Город:
    Москва
    Про код я знаю. Но мне нужны были GET запросы, которые Фаерфокс в Мониторе сети отдает. Там вся инфа в JSON файлах, а через WBApp их не понял как получить. В принципе задачу через костыли я решил, но думал может быть есть какое-то более изящное решение.
     
    Root нравится это.

Поделиться этой страницей