парсинг групп вконтакте

Тема в разделе "Решение различных задач по парсингу", создана пользователем konfuciy, 10 янв 2013.

  1. konfuciy

    konfuciy New Member Пользователи

    Регистрация:
    10 янв 2013
    Сообщения:
    89
    поддерживает ли программа парсинг обсуждений, новостей, стены, материалов групп вконтакте?
     
  2. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.431
    Адрес:
    Latvia
    Если кратко: коменты от фейсбука или от вконтакта нельзя спарсить для каждой новости.
    Подгружаемое яваскриптом нельзя спарсить. За исключением того что можно отловить через снифер и потом передать прямой адрес (ajax, javascript) подгружаемого блока в парсер для обработки.
     
  3. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Ссылки недоступны для гостей
     
  4. rasta

    rasta New Member Пользователи

    Регистрация:
    14 июн 2013
    Сообщения:
    2
    А как избежать бана? Парсил в один поток, задержка 1100, >2000 юзер агентов, но всё равно бан наступает очень быстро! Как этого избежать? Использовать прокси?
     
  5. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.431
    Адрес:
    Latvia
    Парсить вк с паузой от 5000мс (это 5 секунд) !
     
  6. rasta

    rasta New Member Пользователи

    Регистрация:
    14 июн 2013
    Сообщения:
    2
    Тот же результат, больше 600 id не парсит. Прокси могут помочь? Или дело не в них?
     
  7. seodamage

    seodamage New Member Пользователи

    Регистрация:
    5 фев 2014
    Сообщения:
    31
    Отлично, я не желею что приобрел вашу программу, все получилось с 1 раза. Есть годное вики где подробно все описано, спасибо! Вижу тут у ребят проблемы с парсингом большого кол-ва анкет, думаю мне тоже предстоит через это пройти, главное что начало положено
     

Поделиться этой страницей