Сохранение результата парсинга контента

После парсинга сохраняет пустой файл

invalid@example.com (makar) — Wed, 27 Dec 2023 16:05:36 +0000

Добавляю ссылки на то что нужно спарсить, нажимаю парсить, в итоге парсит только половину
Если каждую ссылку парсить отдельно то все ок, если добавлено до 4ех ссылок то тоже норм парсит, если больше 4ех парсить, то часть сохраняемых файлов с данными оказываются пустыми

Если не нужно сохранять документ

invalid@example.com (keps) — Sun, 08 Oct 2023 16:40:14 +0000

Иногда требуется просто запустить страницу без сохранения документа. Как это сделать? В системе помощи не нашел инфы.

Удалить дубли

invalid@example.com (logindenic) — Sun, 25 Jun 2023 10:05:20 +0000

Приветствую.
Подскажите, как удалить дубли, после того, когда дозаписывается спарсенный файл?

Как вывести csv UTF-8 без BOM

invalid@example.com (logindenic) — Sun, 25 Jun 2023 10:03:38 +0000

Как сохранить csv в UTF-8 без BOM?
В опциях программы поставил дефолтное значения UTF-8 без BOM, создал новый проект и все равно выводит в UTF-8 с BOM.

Пустые значения повторяющейся границы парсинга

invalid@example.com (strateg2010) — Mon, 27 Mar 2023 17:11:16 +0000

Добрый день, есть необходимость парсить конкретные артикулы в блоке рекомендуемых товаров, только того производителя, который в данный момент паршу, к примеру страница товара с производителем GROHE и нужно собрать все артикулы, в блоке рекомендуем этого же производителя.
Тут проблем не возникло и собираются только те артикулы которые нужны, но появляются пустые значения:
в настройке ПГ фильтрую при помощи IF

Код:

[IF1][TEXTEQUAL][GRAN14][THEN][GRAN15][ELSE][/IF1]

...

Пустые значения повторяющейся границы парсинга

После 200 ссылок в результатах парса начинает попадать HTML код страницы

invalid@example.com (VVV) — Mon, 05 Sep 2022 01:41:09 +0000

В задании стоит 3900 ссылок, запуск задания как с прокси, так и без (даже в один поток) - результат одинаков - где-то после 200го результата начинает сыпаться html код страницы (Описание товара на WB с html, причем в результаты валится всё и коды счетчиков и ссылки на скрипты и прочее.. ) , и так несколько ссылок подряд, потом снова нормально парсится.

Если запустить отдельно эту ссылку на парсинг - всё ок, это именно в очереди заданий происходит.
Баг именно на описании товара получаем.
На...

После 200 ссылок в результатах парса начинает попадать HTML код страницы

Как поменять маску имени файла вывода CSV

invalid@example.com (CSVCS) — Mon, 27 Jun 2022 00:16:38 +0000

Здравствуйте! Не смог найти самостоятельно, ни в разделе помощи, ни на форуме, ни в настройках программы...
Подскажите, пожалуйста, где в настройках программы можно задать маску именам файлов, отличную от article_all_? Сейчас все результирующие файлы имеют имена article_all_1.csv, article_all_2.csv и т.д., а хотелось бы задать им маску по названию проекта.

Проблема с кодировкой

invalid@example.com (dimochkaorg) — Fri, 21 Jan 2022 03:12:08 +0000

Борцы за светлое будущее Земли и борцухи!! )))) Случилось страшное. Парсил я один сайт. Оставив загрузку Web документа в режиме AUTO. И получил на выходе вот такое РїРµСЂРµРґР°С‚РѕС‡РЅРѕРіРѕ РѕС‚РЅРѕС€РµРЅРёСЏ СЂСѓР»СЏ (VGS/VGRS)";"РРЅРґРёРєР°С‚РѕСЂ РїР°РґРµРЅРёСЏ РґР°РІР»РµРЅРёСЏ . Два дня работы коту Шредингера под хвост или можно как-то декоднуть? Хелп.

Как сохранить html в txt и задать название из

invalid@example.com (timyrbay) — Thu, 10 Jun 2021 08:08:39 +0000

Нужно сохранить документы, в csv не получается - они фрагментируются.
Как можно сохранить название текстового документа из ссылки ?
В ссылках присутствуют невозможные для виндовс знаки типа https:// - их можно как-то исключить из названия?

Возможность сохранения файлов сразу на внешний сервер

invalid@example.com (weresa) — Fri, 11 Dec 2020 13:08:02 +0000

Здравствуйте.
Ситуация такая, что нужно выкачать несколько миллионов фото и это, конечно, потребует значительного пространства на диске. И впоследствии возникнет проблема с передачей фото клиенту...
Существует ли возможность, чтобы назначить местом сохранения файлов не свой компьютер, а например Гугл-диск либо другое какое-то "облако"?
Заранее благодарю всех за отклик)

Оставить пустые контейнеры ячеек после [DYNAMICVALUES]. Возможно?

invalid@example.com (Smodey) — Wed, 18 Nov 2020 00:26:47 +0000

Добрый день. Суть в чём.
Допустим парсим характеристики товара через [DYNAMICVALUES] с разных страниц в разные файлы.
В случае, если значения 4 и 5 нету, то создаётся файл:
"Хар1";"Знач1";"Хар2";"Знач2";"Хар3";"Знач3";"Хар4";"Знач4";"Хар5";"Знач5"
"1";"1";"2";"2";"3";"3"

Возможно ли сделать так, чтобы создавался вот такого формата файл:
"Хар1";"Знач1";"Хар2";"Знач2";"Хар3";"Знач3";"Хар4";"Знач4";"Хар5";"Знач5"
"1";"1";"2";"2";"3";"3";"";"";"";""

Т.е. чтобы добавлялись пустые ячейки в конце...

Оставить пустые контейнеры ячеек после [DYNAMICVALUES]. Возможно?

Сохранение в том же файле (с указанным именем)

invalid@example.com (wcw2007) — Thu, 05 Nov 2020 18:04:46 +0000

Добрый день!

Возможно ли, добавить кнопку возле чистка папки перед сохранением или сохранять все в 1 файл, добавить кнопку сохранять в том же файле, т.е. я парсю локальные файлы, и нужны сохранения именно в этом файле с таким же названием, а сейчас в папку content названия статей article1.html вообще не то. Огромное спасибо программа супер.

Ошибка записи данных в файл

invalid@example.com (Farid) — Thu, 08 Oct 2020 13:10:23 +0000

Первый раз с таким столкнулся.

Посмотреть вложение 8830

Нельзя даже закрыть программу. Только через диспетчер задач.

Некоторые символы сохраняются, как знаки вопросов

invalid@example.com (ap2205) — Mon, 21 Sep 2020 19:25:14 +0000

Здравствуйте, скажите пожалуйста, почему при парсинге характеристик в значениях вместо "x" появляются "?"?
Скрин прилагаю...
Посмотреть вложение 8788
Пробовал парсить с разной кодировкой ANSI, UTF-8, UTF-8 без BOOM. При настройках UTF-8, UTF-8 без BOOM вообще все в непонятных символах. А при ANSI появляются знаки вопроса.

При парсинге в таблицу CSV данные сохраняются в некорректном формате

invalid@example.com (jeck2020) — Mon, 06 Jul 2020 13:01:22 +0000

Помогите, пожалуйста, решить задачу.

Есть такой сайт (одна из нужных страничек) http://freshsound.ru/12309-nine-audio-the-code.html

и такой код
.....

Код:

.....

Задаю начало границы (парсю с границами) - CD_GRAN_4

Код:

При парсинге в таблицу CSV данные сохраняются в некорректном формате

Парсинг остатка незагруженных страниц

invalid@example.com (timyrbay) — Sun, 05 Jul 2020 11:32:43 +0000

Здравствуйте.
Столкнулся с задачей. Нужен парсинг характеристик сайта. Все парсится, хорошо, но так случается что остаются не спарсенными ссылки (1-5%).
1. Как можно неспарсенные ссылки добавить в список парсинга автоматически?
2. В программе есть инструмент для работы с csv файлами. Есть ли возможность объединить одинаковые столбцы характеристик (при парсинге характеристик) для нескольких файлов csv?

Парсинг одного WEB документа в разные файлы на диск

invalid@example.com (dimochkaorg) — Fri, 26 Jun 2020 20:13:11 +0000

Друзьяи мои, есть проект парсится все с одной странице, путем повторяющихся границ, скажите нельзя ли чтобы каждый цикл ложился в отдельный файл? А то все парсится в один. Я уже жал кнопку 1 и отжимал. Как понимаю файл результата создается на один вебдокумент. но что делать, ведь он у меня только один. )))

Unicode

invalid@example.com (baracuda) — Thu, 23 Apr 2020 11:39:38 +0000

Не совсем понимаю как решить вопрос...
при парсинге "границы парсинга" в дополнительных настройка ставим галочку html в txt и символы
На свежем воздухе
превращаются в нормальные буквы..

Задача превратить тоже самое но при "повторяющихся границах"

Заранее спасибо..

Спасибо.. вопрос решён [HTMLDECODE]

Ограничение на длину пути к файлу

invalid@example.com (weresa) — Fri, 31 Jan 2020 18:54:02 +0000

Здравствуйте, уважаемые.
Столкнулась с такой проблемой - сохраняю фото с указанием иерархии папок его размещения.
А поскольку там вложенность в 5 уровней и название папок иногда длинное, то последняя папка сохраняется в обрезанном виде. Из-за этого неверно происходит сохранение фото.
Не подскажете ли, можно ли это ограничение снять или изменить?
Вопрос очень важный. Очень надеюсь на вашу помощь..

Сортировка результатов парсинга

invalid@example.com (hair_fly) — Sun, 10 Nov 2019 12:45:25 +0000

Подскажите, можно ли как-то после окончания парсинга сделать сортировку полученного csv по определенному столбцу?