Возможно ли CD спарсить контекстные объявления?

Тема в разделе "Решения по парсингу популярных сайтов", создана пользователем Moodys, 29 мар 2020.

  1. Moodys

    Moodys New Member Пользователи

    Регистрация:
    11 май 2018
    Сообщения:
    3
    Город:
    Montevideo
    Возможно ли с помощью CD спарсить контекстные объявления яндекс и гугл по группе ключей? Требуется лишь ответ ДА или НЕТ от знающих юзеров
     
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Не решал данный вопрос.

    Назовите адрес страницы (откуда парсить данные) и укажите, какие именно данные нужно спарсить.
     
    Moodys нравится это.
  3. Moodys

    Moodys New Member Пользователи

    Регистрация:
    11 май 2018
    Сообщения:
    3
    Город:
    Montevideo
    Здравствуйте!
    Например:
    [​IMG]
    По поисковому запросу "купить зарядник для самсунг" в выдаче Яндекс сверху и внизу страницы присутствует рекламное объявление (внизу - от 2 до 4 объявлений):
    [​IMG]
    Выдача зависит от региона - думаю, этим можно манипулировать с помощью прокси. Так же регион можно выставлять в настройках поиска:
    [​IMG]
    Но выставление региона в настройках поиска не меняет URL.

    Вот эти объявления(и url сайта, куда они ведут) и необходимо спарсить, подставляя разные ключи в URL
    И, если это возможно, изменять регион через настройки поиска.
     
    Последнее редактирование: 30 мар 2020
  4. kadishev1997

    kadishev1997 Well-Known Member Пользователи

    Регистрация:
    27 мар 2019
    Сообщения:
    310
    Это можно сделать с WBAPP (CEF) (Замену Гео в настройках яндекса, в подвале сайта), либо прописывать данные через авторизацию, в каком городе необходимо собирать данные (Ctrl+k), чтобы спарсить быстрее.

    По поводу Рекламных объявлений - настравляете Границу Парсинга там, где прописано слово "Реклама" и выставляете её обязательной в настройках.
    Ключевики - меняете по URL ссылки, сгенерировать думаю будет не проблема (Ctrl+g)

    В остальном - проявление смекалки и немного фантазии :)
     
    Root и Moodys нравится это.
  5. AlexandrSorokin

    AlexandrSorokin Active Member Пользователи

    Регистрация:
    27 ноя 2018
    Сообщения:
    71
    Город:
    Пермь
    Слова Реклама нет, так как верстка закодирована (обфускация)
    При выборе одной ссылки, собирается мусор.

    Присоединяюсь к автору, интересно как парсить рекламу
     
  6. Denorion

    Denorion Member Пользователи

    Регистрация:
    7 апр 2020
    Сообщения:
    52
    Город:
    Москва
    По этой ссылке пробовали парсить объявления? Ссылки недоступны для гостей Может проще отсюда брать?
    На сколько я помню из директологии по этой ссылке ранжирование идет по установленной рекламодателем ставке за клик и может отличаться от выдачи на серпе.
    Т.е. если по этой ссылке Ссылки недоступны для гостей
    1-е объявление самая высокая ставка за клик (например рекламодатель поставил 40 руб)
    2-е объявление средняя цена за клик (например 30 руб)
    3-е объявление низкая цена за клик (например 20 руб)

    То на серпе выдача может быть совсем другая - тут учитывается ctr. И если ctr у дорогого объявления за 40 руб равен 5%, а у третьего за 20 руб равен 15%, то просто посчитать то выгоднее толкать на первое место объявление с высоким ctr, даже если там меньше ставка по клику - яндекс больше заработает с более кликабельного объявлениря.

    ctr 5% дорогое объявление за 40 руб = 200 рублей со 100 показов (5 кликов)
    ctr 15% у дешевого объявления за 20 руб = 300 рублей со 100 показов (15 кликов)
    // по фактически списываемой сумме за клик - там много деталей, но принцип понятен //

    Т.е. на выдаче это объявление скорее всего будет впереди, а по этой ссылке Ссылки недоступны для гостей не факт, что будет на первом месте.

    Исходя из этой информации можно понимать, кто душит по ставкам, а у кого хорошие кликабельные объявления.

    ... и не знаю, как вам поможет эта информация при парсинге))
     

    Вложения:

    AlexandrSorokin нравится это.

Поделиться этой страницей