Парсинг nakolesah.ru или как многократно запустить WBApp

Есть такой сайт

Скрытое содержимое:

**Скрытое содержимое: доступно при наличии 1 постов.**

В зависимости от выбранного производителя авто, подгружается модель автомобиля, далее в зависимости от выбранной модели даты выпуска, в зависимости от даты выпуска подгружаются модификации и уже после того, как выбирается модификация предлагаются варианты шин и дисков.
Есть проект, который получает Производителей и подставляет их в селект, после чего прогружается модель. Как сделать возврат части кода из WBApp с последующим получением из него UUID и передачей его обратно в WBApp? Т.е. получили часть кода с моделями, вернули часть кода. Выбираем из этого кода UUID и передаем обратно WBApp. Получаем код с годами выпуска, выбираем UUID, передаем обратно WBApp, получаем код с модификациями, выбираем UUID, передаем WBApp, получаем варианты шин и дисков и уже эти данные парсим.

 

Jeka_M, а как ты выбираешь даже производителя через WBApp?

Ага, понял: [PASTE][id][N]0[/N][FULL][SI]:ctl00_contentPlaceHolder_ddlVendors[TEXT]:2
Модель: [PASTE][id][N]0[/N][FULL][SI]:ctl00_contentPlaceHolder_ddlCars[TEXT]:1
И т.д.

Соответственно, тебе не нужно что-то парсить, чтобы выбрать след. значение. Разве что максимальное.
Была бы возможность регулярки использовать с PARAM, может что-то и придумал бы. Пока не знаю...

А так да, не хватает функции взятия того же id, value, title или других параметров в переменную.

 

Да, но для того, чтобы дойти до этой страницы, нужно 4 раза выставить селекты. Информация по вариантам доступна сразу только по первому селекту - Производитель. Только после выбора определенного производителя подгружаются следующие варианты селекта - Модель, и так поочередно все 4. Т.е. для того, чтобы попасть на конечную страничку, нужно поочередно выставить 4 селекта, варианты которых сразу мы не знаем, т.к. они подгружаются динамически. Более того, если посмотреть на value селектов, то они там представлены в виде UUID, а соответственно их нужно получить (обычным генератором значений это сделать не получится). Просчитать или получить сразу конечную ссылку не возможно, т.к. на нее осуществится переход только после выставлении всех 4-х селектов, которые сразу выставить тоже нельзя, можно только по шагам.

 

Да, нужно сначала дойти до страницы а уже потом ее парсить. Для того, чтобы до нее дойти, нужно 4 раза выставлять соответствующие селекты, которые заранее невозможно просчитать.

 

Каталог не интересует, интересует подборщик.
Именно для того, чтобы сграбить и создать ссылки, нужно, чтобы WBApp вернул часть кода, который потом еще раз грабиться и снова отдается WBApp и так 4 раза, т.к. первый раз будет только 1 параметр - Производитель, после второго прохода - 2 параметра и т.д. Так вот проблема именно в том, как сделать, чтобы WBApp вернул часть кода, который потом можно распарсить и снова передать WBApp и так 4 раза.

 

Ссылки недоступны для гостей
[GETHTML] — добавит текущий код страницы к результату парсинга. Если вызывать этот макрос несколько раз, например, в цикле, то, каждый раз, к результату будет добавляться текущий код web-страницы (на момент срабатывания макроса [GETHTML]). Его полезно применять в случае парсинга, например, нескольких страниц выдачи поисковика (чтобы при перелистывании на следующую страницу, результат парсинга не заменялся, а к нему добавлялся код следующей страницы выдачи).

 

Да, пользовался этой функцией, но получилось вернуть весь документ в результат, но не понятно, как с ним работать дальше, а часть кода вернуть не получилось, как описано

[GETHTML]:начало{get}конец|{get}​

Нужно выполнить часть кода
<select class="FilterPanel_DropDownList_PickCars" id="ctl00_contentPlaceHolder_ddlCars" onchange="javascript:setTimeout('__doPostBack(\'ctl00$contentPlaceHolder$ddlCars\',\'\')', 0)" name="ctl00$contentPlaceHolder$ddlCars">
<option value="NULL" selected="selected">------</option>
<option value="bc54dbc0-ff31-44cb-96bd-3ef2c0fe5983">A1</option>
<option value="e58b1e48-575f-48e4-ad04-67d9641f2613">A2</option>
............................
<option value="6505e720-2667-43f8-9817-19176d3b6408">TT</option>

</select>

В WBApp делаю так, но почему-то не получается вывести нужный кусок. Может быть неправильно делаю, но из описание не совсем понятно, а примера нет.

[PASTE][id][N]0[/N][FULL][SV]:ctl00_contentPlaceHolder_ddlVendors[TEXT]:[CDDATA:brand]
[WAIT]:3000
[GETHTML]:<select class="FilterPanel_DropDownList_PickCars" id="ctl00_contentPlaceHolder_ddlCars" onchange="javascript:setTimeout('__doPostBack(\'ctl00$contentPlaceHolder$ddlCars\',\'\')', 0)" name="ctl00$contentPlaceHolder$ddlCars">
<option value="NULL" selected="selected">------</option>{get}</select>|{get}

 

Почему не возможно, я ведь пример привел, как их все 4 без особого труда можно выставить:

[PASTE][id][N]0[/N][FULL][SI]:ctl00_contentPlaceHolder_ddlVendors[TEXT]:1
[PASTE][id][N]0[/N][FULL][SI]:ctl00_contentPlaceHolder_ddlCars[TEXT]:2

[PASTE][id][N]0[/N][FULL][SI]:ctl00_contentPlaceHolder_ddlVendors[TEXT]:1
[PASTE][id][N]0[/N][FULL][SI]:ctl00_contentPlaceHolder_ddlCars[TEXT]:3

[PASTE][id][N]0[/N][FULL][SI]:ctl00_contentPlaceHolder_ddlVendors[TEXT]:5
[PASTE][id][N]0[/N][FULL][SI]:ctl00_contentPlaceHolder_ddlCars[TEXT]:1

В этих примерах, все модели будут разные, так как меняем ID.
И можно такой огромный список сделать, к примеру, для производителей 71, для моделей 25, для года выпуска 5, для модификации: 4, как пример.
Это не самый оптимальный способ, но он должен по-идее работать Вам же не всех производителей нужно, а только какого-то определенного? + даже если вы будете получать данные, не понимаю как это вам поможет. Подставить же получится только одно значение модели/года выпуска/модификации.

 

Вы пробовали свой код или просто так написали? Посмотрите, как сделаны селекты на сайте

 

ШОК!

А вы сами устанавливал ContentDownloader, или кто-то помогал?

Смотрим: Ссылки недоступны для гостей (Sorry за музыку, в первый раз запись не удалась, ошибка вылезла; по-этому писал со второго и забыл отключить)

 

Не хотел никого оскорбить, поэтому приношу извинение, если это было так воспринято. Просто тот скрипт, который приведен работает не так, как хотелось бы. Может это только у меня так получается, поэтому выкладываю видео.
Скрипт:

[PASTE][id][N]0[/N][FULL][SI]:ctl00_contentPlaceHolder_ddlVendors[TEXT]:0
[WAIT]:3000
[PASTE][id][N]0[/N][FULL][SI]:ctl00_contentPlaceHolder_ddlCars[TEXT]:0
[WAIT]:3000

В этом варианте, подгружается Производитель, но не подгружается модель. Получаем Acura без модели.

Далее, меняем скрипт

[PASTE][id][N]0[/N][FULL][SI]:ctl00_contentPlaceHolder_ddlVendors[TEXT]:1
[WAIT]:3000
[PASTE][id][N]0[/N][FULL][SI]:ctl00_contentPlaceHolder_ddlCars[TEXT]:1
[WAIT]:3000

Получаем нового производителя, но модель после первого запуска сначала выбирается одна (Alfa Romeo 146), после второго запуска - уже другая (Alfa Romeo 147).

Видео - Ссылки недоступны для гостей

P.S. Не совсем понятно, как использовать [GETHTML], когда нужно вернуть часть кода, т.к. нет примера.

 

А это здесь причем? Зачем вам несколько раз выбирать того же производителя или модель? Используйте индекс начиная с единицы. Под нулевым индексом находятся "------". Из-за этого, собственно, второй раз и выбирается другая модель/год и т.д., так как при указании производителя/модели "------" исчезают, и индекса элементов уменьшаются на единицу.

 

Именно так и хотел сделать, сначала спарсить производителей, потом передавая производителей спарсить модели и т.д., но застрял на том, как из WBApp вернуть результат, чтобы его снова распарсить.

 

Тема старая, но может кому понадобится. Ссылки для парсинга

Скрытое содержимое:

**Скрытое содержимое: доступно при наличии 1 постов.**

 

Спасибо