Сохраняем ограничено количество страниц в каждую папку

Тема в разделе "Решение различных задач по парсингу", создана пользователем maxwelhelp, 20 фев 2017.

  1. maxwelhelp

    maxwelhelp Member Пользователи

    Регистрация:
    24 ноя 2016
    Сообщения:
    35
    Мне необходимо реализовать что бы парсер сохранял по 1000 страниц в папку content, потом создавал папку content2, content3...

    То есть в каждую папку content* сохраняется ограничено количество страниц, ну и все картинки которые есть у этих страниц.

    Подскажите как это реализовать ?
    Заранее вам благодарен.
     
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Используйте макрос [DOCNAME] для назначения пути и имени сохраняемого файла. Также используйте в нем макрос [INT_ID].

    2017-02-20_13-25-59.png

    2017-02-20_13-34-17.png

    С уважением к вам, Сергей.
     
  3. maxwelhelp

    maxwelhelp Member Пользователи

    Регистрация:
    24 ноя 2016
    Сообщения:
    35
    Большое вам спасибо за ответ.
     
    Root нравится это.
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Пожалуйста...
     
  5. maxwelhelp

    maxwelhelp Member Пользователи

    Регистрация:
    24 ноя 2016
    Сообщения:
    35

    А как сделать тоже самое с учетом того что я парщу каждую страницу в отдельный .html файл и таких файлов должно быть 1000 в папке контент ?
    (то есть я не в один файл парщу)
     
  6. maxwelhelp

    maxwelhelp Member Пользователи

    Регистрация:
    24 ноя 2016
    Сообщения:
    35
    Разобрался [DOCNAME]content-[INT_ID]\[INT_ID2].html[/DOCNAME]
     
  7. maxwelhelp

    maxwelhelp Member Пользователи

    Регистрация:
    24 ноя 2016
    Сообщения:
    35
    А как тоже самое сделать для картинок
    что бы все картинки с 1000 стрниц сохранялись в папку content-1\images, потом в папку content-2\images, и.т.д....
     
  8. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Картинки грузите макросом <DOWNLOAFILE>?
     
  9. maxwelhelp

    maxwelhelp Member Пользователи

    Регистрация:
    24 ноя 2016
    Сообщения:
    35
    нет, картинки загружаются без макроса
     
  10. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул

Поделиться этой страницей