Как парсить Вконтакте (+ видео авторизации)

Тема в разделе "Парсинг конкретных сайтов по запросу (ПЛАТНО)", создана пользователем Root, 14 янв 2012.

  1. MAX3000

    MAX3000 New Member Пользователи

    Регистрация:
    14 дек 2010
    Сообщения:
    43
    Приветствую.
    Подскажите пожалуйста как можно спарсить участников группы ВК, но не через страницу вк_ком_search? (т.к. в ней отображается не полный перечень участников), а в сплывающем окне после клика на странице группы по ссылке «Участники».

    В задании границ парсинга элементы всплывающего окна не видны - что не позволяет их забирать со страницы.
    WBApp видит элементы, но:
    1. не прокручивается данный список;
    2. для сбора не хватает функционала.
    А именно:
    - взять со страницы количество участников - элемент innerhtml;
    - удалить теги;
    - преобразовать в число;

    [​IMG]

    - присвоить переменной, назовем её N;
    - создать цикл от 0 до N

    [​IMG]

    - пройтись по classname "N"
    - собрать href и innerhtml (возможно временно сохранить в переменные)
    - сохранить их в файл!

    Такое можно реализовать?
    Спасибо!
     
    Последнее редактирование: 11 авг 2015
  2. Japonec

    Japonec Well-Known Member Пользователи

    Регистрация:
    19 июл 2015
    Сообщения:
    92
    Адрес:
    Kiev
    могу спецсофтом с групп собрать всё об учасниках, ид, пол, интересы, тел, скайп если есть и тд.
     
  3. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.429
    Адрес:
    Latvia
    Используйте vk.com API
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Получаете ответ в виде:
    количество участников отметил красным.

    п.с. подробнее vk.com/dev/groups.getMembers
     
  4. MAX3000

    MAX3000 New Member Пользователи

    Регистрация:
    14 дек 2010
    Сообщения:
    43
    За подсказку Спасибо!
    НО! Данный метод - Отдает только 1000 участников, а нужно всех.
    Так что если можно реализуйте выше описанный способ - на форуме многих интересует этот вопрос, они будут очень благодарны как и я.
     
    Последнее редактирование: 12 авг 2015
  5. Greedy

    Greedy New Member Пользователи

    Регистрация:
    30 сен 2014
    Сообщения:
    7
    Друзья, вконтакте только у меня парситься перестал CD или у всех?
     
  6. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Что именно не так у вас с Вконтакте?

    Только что проверил - все ok!

    С уважением к вам, Сергей.
     
  7. Greedy

    Greedy New Member Пользователи

    Регистрация:
    30 сен 2014
    Сообщения:
    7
    Здравствуйте.
    При запуске парсинга даже в два потока через пару страниц вк перестает загружаться вообще даже в браузере.
     
  8. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Пробуйте парсить в 1 поток с паузой между запросами 1100 мс.

    С уважением к вам, Сергей.
     
  9. Greedy

    Greedy New Member Пользователи

    Регистрация:
    30 сен 2014
    Сообщения:
    7
    Да пробовал уже, все равно не парсит. Походу провайдер режет. Спасибо за помощь.
     

Поделиться этой страницей