у меня около 700.000 урл в проекте - я так до старости не управлюсь:)
@kenny872012 один проект, но да, он с WBappCEF.
@kenny872012 я скорее не про электричество, а про количество ядер процессора, threads и RAM. Задача стоит такая: запускать несколько проектов CD...
Отдельный компьютер хочется. Хотя если кто-то обсчитывал разницу хостинга и локального компьютера в деньгах, ядрах и РАМе, то было бы...
Нужно построить парсинг-станцию для парсинга нескольких больших доноров в режиме 24×7. Подскажите, пожалуйста, кто строил: какое железо брали и с...
Спасибо. Так и сделаю. [HIDDEN CONTENT]
[HIDDEN CONTENT]
Всё равно неясно. Что значит "не содержат"? Они же есть на странице, видны точно так же, как и другие элементы, которые успешно парсятся. Поискал...
@Root а как получается, что остальные данные из тех же повторяющихся границ парсятся корректно? Не пойму никак: первый цикл - это тот, который с...
Отцы, порадуете чем-нибудь? Если надо немецких прокси для продолжения исследований - скажите, их есть.
Да, прикрепил файл проекта. Тем, кто будет пробовать - пользуйтесь прокси, которые в проекте, они рабочие, и, самое главное, их пропускает донор....
При неясных условиях (похоже, что как-то зависит от того, как остановлен парсинг и закрыта программа) вместо "нормальных" заголовков в CSV пишется...
На страницах есть разное количество неких блоков кода, типа <div class="rating-block"</div> - на одном урл такой блок один, на другом урл -...
@kagorec О! Вот это большая новость! На прошлой неделе ещё не было. Но сейчас я уже на том этапе, что "моя" карта сайта гораздо подробней, чем...
@kagorec Спасибо, всё верно говорите. Только карты сайта нет. Пробовал играться с {num} - получилось хорошо, но кроме чисел в урл есть ещё слова,...
@Root Да вот самая же актуальнейшая. Другой-то и быть не может - переставлял когда на локальную машину, поставил, естественно, устаревшую версию,...
Вот ещё, кстати: при парсинге с помощью WbappCEF (с ИЕ не пробовал) процессы WВapp "крадут" фокус у всех окон, которые открыты в винде...
@kagorec Переустанавливал после первого бага. Сейчас перенёс на локальную машину - она у меня вроде боевая, буду смотреть сутки-другие. Сейчас...
Прошу прощения - попал в логическую яму. Для тех, кто в танке: надо вот так : {get}|{get}
Вот есть такой элемент: <span class="rating-portal__update">Letzte Aktualisierung: 14.09.2018</span> Мне нужна только дата из него. Границу по...
Имена участников (разделяйте запятой).
