Предложения по улучшению программы

Тема в разделе "Развитие Content Downloader", создана пользователем Root, 13 мар 2010.

  1. Xpite

    Xpite Member Пользователи

    Регистрация:
    13 мар 2017
    Сообщения:
    103
    Рассмотрите пожалуйста возможность добавить функционал использования фильтра ссылок для вложенных карт сайта, сейчас CD не фильтрует ссылки из вложенных карт сайта даже при нажатой галочке, фильтрует только для не вложенных. Спасибо
     
    Последнее редактирование: 4 фев 2023
    kagorec нравится это.
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Для фильтрации адресов вложенных карт сайтов уже давно существует специальный фильтр.

    2023-02-05_12-10-14.png
     
    Xpite нравится это.
  3. Xpite

    Xpite Member Пользователи

    Регистрация:
    13 мар 2017
    Сообщения:
    103
    Это фильтрация вложенных карт сайта по критериям, а я имею ввиду фильтрацию ссылок из вложенных карт сайта. Ну например я столкнулся с такой ситуацией: есть сайт с картой сайта, состоящей из сотен вложенных карт, в каждой по 40к ссылок. Мне нужно собрать ссылки только на определенный /razdel/. Соответственно, хотел, чтобы на этапе обработки вложенных карт, он фильтровал не подходящие разделы, а не добавлял все подряд. Задачу выполнил обычным парсером, но мне кажется актуально будет для многих.
     
  4. Xpite

    Xpite Member Пользователи

    Регистрация:
    13 мар 2017
    Сообщения:
    103
    И еще небольшой момент. Разбираю JSON данные. Беру границы для "parametr": [ - закрывающую границу беру [JSONAUTO]square. Но если внутри еще раз открываются квадратные скобки для элемента, например "parametr": [{"blabla": "blabla", "param2": [{.....}], ...}] то границы задаются не правильно - до первой квадратной скобки, не смотря на то, что это закрывающая скобка внутреннего элемента.
     
  5. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Не должно так быть.

    Приложите проект с одной ссылкой, где такое наблюдаете.
     
  6. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Ссылки внутри дочерних карт сайта фильтруются, как обычно, с помощь фильтров ссылок (Ctrl+3).

    Если не так, предоставьте адрес карты сайта, проверю.
     
  7. vadimsoloviev

    vadimsoloviev Member Пользователи

    Регистрация:
    6 окт 2017
    Сообщения:
    66
    Город:
    Витебск
    [​IMG]
    Нужны вкладки для проектов. Даже в ворде уже появились.)
     
  8. kenny872012

    kenny872012 Well-Known Member Пользователи

    Регистрация:
    18 фев 2018
    Сообщения:
    312
    Даже в Ворде! А если проектов больше 1000 у людей?
     
  9. Vitaliy_S

    Vitaliy_S Member Пользователи

    Регистрация:
    20 янв 2019
    Сообщения:
    48
    Город:
    Уфа
    Почему при задании границ парсинга 2 разных шрифта? Сейчас выбран Tahoma
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 5 постов.**
    upload_2023-2-8_11-21-21.png
     
    kagorec нравится это.
  10. talerbiz

    talerbiz Active Member Пользователи

    Регистрация:
    11 мар 2017
    Сообщения:
    143
    Content Downloader - мощнейший парсер и под капотом у него есть такой инструмент как "Regex" или проще говоря "регулярные выражения". Но к сожалению многие ими не пользуются тк. считают что в них сложно разобраться. Конечно, чтобы понять работу регулярных выражений, хотя бы азы, нужно уделить пару недель на изучение и практику.

    Content Downloader -смог бы значительно облегчить задачу с написанием регулярных выражений если бы обладал, как минимум подсветкой кода, как реализовано во многих онлайн сервисах.
    Также я не нашел функции "Replace"
     
  11. strateg2010

    strateg2010 Active Member Пользователи

    Регистрация:
    12 фев 2018
    Сообщения:
    181
    Город:
    порт
    Добавьте пожалуйста макрос, который принудительно может заставить тот или иной макрос сработать в определенный момент. к примеру [ORDER=3][COUNT][/ORDER] который в свою очередь сработает, в определенном порядке. Заранее спасибо
     
  12. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.429
    Адрес:
    Latvia
    Ссылки недоступны для гостей - макрос IF и IFNIL
     
  13. strateg2010

    strateg2010 Active Member Пользователи

    Регистрация:
    12 фев 2018
    Сообщения:
    181
    Город:
    порт
    Не совсем понимаю, к чему макрос IF и выставление сортировки работы другого макроса?
     
  14. ITz

    ITz Member Пользователи

    Регистрация:
    31 янв 2020
    Сообщения:
    43
    Город:
    Third Rome
    Приветствую,

    нужна отдельная функция обработки полученных строк при парсинге в частности ссылок типа https%3A%2F%2Fmoiknigi.com%2Fbook_95733%2F&s=62 в "читабельный вид" по типу->URL-кодирование->преобразовать из URL кодировки, наподобии [URLDECODE] [VALUE][/URLDECODE]

    из пожеланий :) к примеру было бы не плохо сделать преобразование наоборот читабельных ссылок в URL кодировку при парсинге на лету каким-либо (переключателем-кнопкой) в разделе верхнего меню "Парсинг и обработка"
     
  15. strateg2010

    strateg2010 Active Member Пользователи

    Регистрация:
    12 фев 2018
    Сообщения:
    181
    Город:
    порт
    День добрый, добавьте пожалуйста функцию для парсинга конкретно выбранных (один или несколько) документов через меню правого клика.
     
  16. strateg2010

    strateg2010 Active Member Пользователи

    Регистрация:
    12 фев 2018
    Сообщения:
    181
    Город:
    порт
    Пожалуйста, сделайте [SKU_UNIQUE] в порядке выполнения ниже, почему он вообще самый первый выполняется? Туда можно подставить только CD_DOCURL и границы парсинга, к чему такой приоритет?

    Потому что если наполнять магазин из разных источников, то этот шаблон по сути бестолковый, так как создаются дубли, вряд ли он будет сверять уже присвоенные SKU, если он проверяет только ключи или я не прав?
     
  17. ex3ra

    ex3ra New Member Пользователи

    Регистрация:
    28 мар 2023
    Сообщения:
    2
    Добавить: ----> Темная тема (DARK MODE)

    Работаю ночью - глаза просто "вытекают" от стандартного оформления

    Коллеги, поддержите лайком, чтобы было заметнее
     
    Alex0690, kagorec и talerbiz нравится это.
  18. talerbiz

    talerbiz Active Member Пользователи

    Регистрация:
    11 мар 2017
    Сообщения:
    143
    Лучше серая как в фотошопе
     
    Classico и ex3ra нравится это.
  19. ex3ra

    ex3ra New Member Пользователи

    Регистрация:
    28 мар 2023
    Сообщения:
    2
    можно несколько тем на выбор - будет только удобнее
     
    talerbiz нравится это.
  20. talerbiz

    talerbiz Active Member Пользователи

    Регистрация:
    11 мар 2017
    Сообщения:
    143
    Вообще лучший вариант будет - самостоятельно настроить цветовую гамму по различным параметрам
     
    ex3ra нравится это.

Поделиться этой страницей