Как парсить определенную выдачу поисковиков???

Тема в разделе "Парсинг во вкладке "Ссылки"", создана пользователем serfer, 28 авг 2013.

  1. serfer

    serfer New Member Пользователи

    Регистрация:
    4 ноя 2011
    Сообщения:
    9
    Приветствую.

    Есть необходимость парсить поисковики по определенным параметрам:

    на первой странице выдачи парсить ссылки на сайты начиная с 5 по 10 включительно
    на второй странице - с 15 по 20 соответственно
    и т.д
    или парсить только каждую вторую ссылку из всей выдачи.

    т.е как сделать более гибкий парсинг ссылок поисковиков.

    Как такое сделать и возможно ли вообще???

    Спасибо.
     
    serfer, 28 авг 2013
    #1
  2. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.442
    Адрес:
    Latvia
    возмжно, во вкладке "ссылки" есть указание границ вот укажите область кода с которого будет сбор ссылок.
     
    kagorec, 28 авг 2013
    #2
  3. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.442
    Адрес:
    Latvia
    Это категория скорее всего "пробуем нестесняясь"))
    Во вкладке ссылки ставим шаблонную ссылку
    https://www.google.lv/search?q={key}&num=20&client=opera&hs=inT&start={num}&sa=N
    Ставим диапазон от 0 до 100, шаг 10
    Далее тут же во вкладке ссылки выделяем начало и конец границ так чтоб это было за первыми 5 выдачами.

    [​IMG]

    Если я правильно понял serfer то выглядит это следующим образом, на скрине:

    [​IMG]

    п.с. сори за длиную простыню))
     
    Последнее редактирование: 29 авг 2013
    kagorec, 29 авг 2013
    #3
  4. nikolas1612

    nikolas1612 Member Пользователи

    Регистрация:
    27 ноя 2011
    Сообщения:
    439
    а каждую вторую слабо? ;)
     
    nikolas1612, 29 авг 2013
    #4
  5. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.442
    Адрес:
    Latvia
    Тогда сканером, поиск-замена где Регулярными выражениями убивало чтоб каждое второе совпадение
     
    Последнее редактирование: 29 авг 2013
    kagorec, 29 авг 2013
    #5
  6. serfer

    serfer New Member Пользователи

    Регистрация:
    4 ноя 2011
    Сообщения:
    9
    Да все верно. Спасибо.
     
    serfer, 29 авг 2013
    #6
  7. Paprika

    Paprika New Member Пользователи

    Регистрация:
    6 ноя 2013
    Сообщения:
    1
    Здравствуйте.
    Возможно ли парсить только выдачу для отдельной страны (страна задается в Расширенном поиске гугла)?
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Спасибо.
     
    Paprika, 26 окт 2014
    #7
  8. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте. Можно.

    Страна прописывается в Cookies. Нужно передать Cookies в программу.

    Нажмите во вкладке "контент" кнопку с изображением ключика, выберите в браузере нужную страну и нажмите кнопку "передать cookies..." (в нижней части окна с браузером).

    С уважением к вам, Сергей.
     
    Root, 27 окт 2014
    #8
  9. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.442
    Адрес:
    Latvia
    Используйте операторы поисковика, для гоогле их предостаточно чтоб искать по нужным критериям и на определенном сайте. Страну достаточно указать в url.
     
    kagorec, 27 окт 2014
    #9
Similar Threads
  1. zek24

    Как парсить выдачу Google

    zek24, 19 фев 2012, в разделе: Решение различных задач по парсингу
    Ответов:
    6
    Просмотров:
    5.774
    Valiks
    5 мар 2012
  2. Magnum

    Как парсить Русскую выдачу Я.Маркет из Украины

    Magnum, 15 июл 2013, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    0
    Просмотров:
    1.855
    Magnum
    15 июл 2013
  3. cduser

    Как парсить выдачу? (Яндекс, Google, Youtube)

    cduser, 2 дек 2013, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    12
    Просмотров:
    7.650
    Root
    30 апр 2014
  4. stomp

    Как скачать изображение в определенную папку?

    stomp, 6 авг 2015, в разделе: Скачивание картинок и файлов
    Ответов:
    2
    Просмотров:
    1.712
    kagorec
    6 авг 2015
  5. proz333

    Как спарсить определенную категорию сайта

    proz333, 28 окт 2015, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    3
    Просмотров:
    1.211
    kagorec
    28 окт 2015
Загрузка...

Поделиться этой страницей