Застрял на парсинге сайта с яваскриптами

Тема в разделе "Парсинг конкретных сайтов по запросу (ПЛАТНО)", создана пользователем Reset, 16 дек 2013.

  1. Reset

    Reset Active Member Пользователи

    Регистрация:
    16 дек 2013
    Сообщения:
    114
    Собственно вот Ссылки недоступны для гостей
    нужно спарсить по всем областям
    затыки:
    1. не могу перелистнуть страницу
    2. не могу поменять в форме данные
    а по дефолту он больше 1000 не выдает

    хотя б ссылки на фирмы получить, остальное уже ерунда
     
    Reset, 16 дек 2013
    #1
  2. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.442
    Адрес:
    Latvia
    Используйте броузер Mozilla с аддоном httpfox , снифером отловите POST data
    Пример, вот ссылка на 5-ую страницу:
    чтобы долго не искать смотрите .....__EVENTARGUMENT=Page%245&.....
    PHP:
    http://bankrot.fedresurs.ru/DebtorsSearch.aspx?ctl00%24PrivateOffice1%24ctl00=ctl00%24cphBody%24upList|ctl00%24cphBody%24gvDebtors&__EVENTTARGET=ctl00%24cphBody%24gvDebtors&__EVENTARGUMENT=Page%245&__PREVIOUSPAGE=E7dqcgRQa-jV6fQyR4kWwD-6ZCJFLlvy095ZMp9RVOWi3yCdBITrLsR04I0wUVEmCZACx_cRVVe4NaC4Cgb9IM8Ot0JrrguveFfsbc7YP2A1&ctl00%24PrivateOffice1%24tbLogin=&ctl00%24PrivateOffice1%24tbPassword=&ctl00%24PrivateOffice1%24tbEmailForPassword=&ctl00_PrivateOffice1_RadToolTip1_ClientState=&ctl00%24DebtorSearch1%24inputDebtor=%D0%BF%D0%BE%D0%B8%D1%81%D0%BA&ctl00%24News1%24hfMaxSize=3&ctl00%24cphBody%24rblDebtorType=Organizations&ctl00%24cphBody%24tbOrgName=&ctl00%24cphBody%24tbOrgAddress=&ctl00%24cphBody%24ucOrgRegionList%24ddlBoundList=&ctl00%24cphBody%24ucOrgCategoryList%24ddlBoundList=&ctl00%24cphBody%24OrganizationCode1%24CodeTextBox=&ctl00%24cphBody%24ucOrgOkopfList%24ddlBoundList=&ctl00%24cphBody%24tbPrsLastName=&ctl00%24cphBody%24tbPrsFirstName=&ctl00%24cphBody%24tbPrsMiddleName=&ctl00%24cphBody%24tbPrsAddress=&ctl00%24cphBody%24ucPrsRegionList%24ddlBoundList=&ctl00%24cphBody%24ucPrsCategoryList%24ddlBoundList=&ctl00%24cphBody%24PersonCode1%24CodeTextBox=&__ASYNCPOST=true&
     
    kagorec, 16 дек 2013
    #2
  3. Reset

    Reset Active Member Пользователи

    Регистрация:
    16 дек 2013
    Сообщения:
    114
    Хм...
    спасибо поколупаю, я ж правда подзабыл как POST работать, но вспомню
     
    Reset, 17 дек 2013
    #3
  4. Reset

    Reset Active Member Пользователи

    Регистрация:
    16 дек 2013
    Сообщения:
    114
    Посмотрел нашел, не понял как листать области
    за область отвечает
    ddlBoundList
    но почему то если я меняю параметр, то область не меняется.
     
    Reset, 17 дек 2013
    #4
  5. Progg

    Progg New Member Пользователи

    Регистрация:
    10 дек 2016
    Сообщения:
    8
    Может быть не в тему.
    Есть страница:
    Ссылки недоступны для гостей
    Пролистнув ниже увидите- "сообщения" (там 6 сообщений и 15 страниц), можно с помощью программы парсить все страницы с сообщениями, чтобы получить ссылки на эти сообщения?? Буду признателен если подскажете как это сделать или в каком уроке искать ответ..‎ спасибо!
     
    Progg, 10 дек 2016
    #5
  6. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Можно, но требуется тип лицензии ULTIMATE, так как нужно в браузере имитировать прокликивание по страницам с сообщениями, а обычными GET-запросами пройтись по этим страницам не удается:
    2016-12-10_06-41-19.png
     
    Root, 10 дек 2016
    #6
  7. Progg

    Progg New Member Пользователи

    Регистрация:
    10 дек 2016
    Сообщения:
    8
    Спасибо, теперь два вопроса:
    1. Действует ли промо коды скидочные на ап программы? (скидка 20%)
    2. Урок есть как делать прокрутку?
     
    Progg, 10 дек 2016
    #7
  8. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Пожалуйста.

    1) Обратитесь по этому вопросу на почту SBFRoot@gmail.com
    2) Можно сделать в течение трех дней
     
    Root, 10 дек 2016
    #8
  9. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    2016-12-10_18-00-49.png 2016-12-10_18-02-28.png 2016-12-10_18-02-55.png 2016-12-10_18-03-39.png
     

    Вложения:

    Root, 10 дек 2016
    #9
    vanred79 и drvoodoo нравится это.
  10. vanred79

    vanred79 Member Пользователи

    Регистрация:
    17 фев 2017
    Сообщения:
    86
    Здравствуйте! Немного изменил код, wbapp нормально работает и перелистывает, но почему то парсится только первая страница. Подскажите пожалуйста в настройка программы что то нужно сделать?
     

    Вложения:

    vanred79, 8 июн 2019
    #10
  11. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    2019-06-08_10-40-34.png
     
    Root, 8 июн 2019
    #11
    vanred79 нравится это.
  12. vanred79

    vanred79 Member Пользователи

    Регистрация:
    17 фев 2017
    Сообщения:
    86
    почему то парсит только до 19 страницы на 20 странице wbapp закрывается
     
    vanred79, 8 июн 2019
    #12
  13. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Потому, что кликов не было и цикл [REPEAT] не перезапустился (так как стоит условие на проверку, был клик или нет).
     
    Root, 8 июн 2019
    #13
Similar Threads
  1. Root

    помощь в парсинге определенного сайта

    Root, 10 мар 2010, в разделе: Решение различных задач по парсингу
    Ответов:
    566
    Просмотров:
    122.119
    mavar
    29 дек 2015
  2. yulisan

    Нужна помощь в парсинге сайта

    yulisan, 27 ноя 2015, в разделе: Решение различных задач по парсингу
    Ответов:
    1
    Просмотров:
    832
    Root
    27 ноя 2015
  3. Diabet

    Друзья подскажите, застрял

    Diabet, 10 ноя 2016, в разделе: Решение различных задач по парсингу
    Ответов:
    8
    Просмотров:
    935
    Diabet
    13 ноя 2016
  4. mcreper

    Проблема с кодировкой при парсинге сайта

    mcreper, 28 ноя 2016, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    3
    Просмотров:
    1.715
    Kreol
    23 янв 2018
  5. Grafin

    Данные с сайта не подгружаются при парсинге

    Grafin, 20 ноя 2018, в разделе: Решение различных задач по парсингу
    Ответов:
    17
    Просмотров:
    1.083
    Root
    22 ноя 2018
Загрузка...

Поделиться этой страницей