Как задать границы парсинга

Тема в разделе "Решение различных задач по парсингу", создана пользователем sotex2, 27 мар 2025.

  1. sotex2

    sotex2 Member Пользователи

    Регистрация:
    12 авг 2020
    Сообщения:
    153
    Город:
    нижний новгород
    Доброго времени суток. Подскажите как задать границы парсинга на сайте tgstat.ru, если для этого нужна авторизация на сайте через телеграм. я пробовал авторизироваться в программе. там в окне всплывает окно с кнопкой - "Войти через Telegram", но при нажатии никаких действий не происходит. как быть?
     
  2. masrub

    masrub Well-Known Member Пользователи

    Регистрация:
    29 июн 2018
    Сообщения:
    250
    попробуйте авторизоваться в браузере, потом скопируйте куки в CD из браузера.
     
  3. sotex2

    sotex2 Member Пользователи

    Регистрация:
    12 авг 2020
    Сообщения:
    153
    Город:
    нижний новгород
    не получается авторизироваться. сайт при .том появляется и когда нажимаю на кнопку авторизация, то все пропадает и в окне белфй экран.
     
  4. LulzSec_ru

    LulzSec_ru New Member Пользователи

    Регистрация:
    15 май 2022
    Сообщения:
    59
    Не верно запостил...
     
  5. sotex2

    sotex2 Member Пользователи

    Регистрация:
    12 авг 2020
    Сообщения:
    153
    Город:
    нижний новгород
    далеко не подходит, так как нельзя спарсить все данные, например только из одной категории. сайтмапов более 500 и в каждом сайтмапов находится информация из разных категорий.
     
  6. sotex2

    sotex2 Member Пользователи

    Регистрация:
    12 авг 2020
    Сообщения:
    153
    Город:
    нижний новгород
    зенопостер делает сбор лучше, а самое главное есть все для разгадывания любых капч, что нет в CD. И это самая больная тема при парсинге. и бесплатные и платные прокси, а также мобильные прокси, как часто пишут нужно использовать, все равно не помогает на долго, хоть за 1000000 рублей будут прокси. и в данном случаи нужно решение не только текстовых капч, а и других. например как в зенопостере.
     
  7. LulzSec_ru

    LulzSec_ru New Member Пользователи

    Регистрация:
    15 май 2022
    Сообщения:
    59
    Понимаю. Но разве у них не меняются "хлебные крошки"? Можно составить список интересных и отфильтровать
     
  8. sotex2

    sotex2 Member Пользователи

    Регистрация:
    12 авг 2020
    Сообщения:
    153
    Город:
    нижний новгород
    я все через зенопостер сделал
     
  9. masrub

    masrub Well-Known Member Пользователи

    Регистрация:
    29 июн 2018
    Сообщения:
    250
    Ну так что вы хотите, программа уж года 3 не обновлялась...
     
  10. sotex2

    sotex2 Member Пользователи

    Регистрация:
    12 авг 2020
    Сообщения:
    153
    Город:
    нижний новгород
    программа справляется нормально и задавать границы парсинга проще и лучше чем в зенопостер. главная проблема в разгадывания капчи. если этот функционал бы работал, то вообще бы цены бы не было. сейчас делать парсинг с хороших сайтов, да и с любых других, везде присутствует капча, а из-за нее проблема возникает с парсингом и это плохо.
     

Поделиться этой страницей