Автоматизация работы CD

Тема в разделе "Разное", создана пользователем TeslaCo, 29 окт 2014.

  1. TeslaCo

    TeslaCo Member Пользователи

    Регистрация:
    4 мар 2014
    Сообщения:
    147
    Здравствуйте, подскажите пожалуйста, как автоматизировать процесс парсинга запуская каждый раз разные проекты

    здесь Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме! ничего не могу понять

    нужно запустить программу, выбрать определенный проект, собрать ссылки или указать ссылки с файла, спарсить ссылки, запустить другой проект сделать тоже самое только с другими ссылками, и так далее

    В планировщике задач нашел только запуск программы. Все остальное как нажимать комбинацию клавиш(например ctrl+o), выбирать файлы(например какой-то определенный проект на диске) и прочее не могу найти.

    Заранее благодарен за помощь.
     
  2. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    3.243
    Хорошо бы для начала ознакомиться с планировщиком задач виндовса.
    На примере возьмем популярную в данный момент ос , Windows 7 планировщик по началу кажется чудом неизведанным для обычных пользователей.

    На youtube.com поиск по "Настроить планировщик задач Windows 7" после просмотренной видео инструкций поможет вам. (пользуюсь сам тоже не только на запуск cd, а также скайп, твидиум и т.д.).
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
     
  3. TeslaCo

    TeslaCo Member Пользователи

    Регистрация:
    4 мар 2014
    Сообщения:
    147
    В этих видео объясняется только как запустить Content Downloader, а как выбрать проект, как запустить парсинг и так далее там к сожалению нет.
     
  4. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    3.243
    В справке с примерами показано - запуск cd с параметрами (например со сканера и со вкладки ссылки или просто парсинг сразу)

    Пример на скриншоте
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
     
    Последнее редактирование: 29 окт 2014
  5. TeslaCo

    TeslaCo Member Пользователи

    Регистрация:
    4 мар 2014
    Сообщения:
    147
    подскажите как перед началом парсинга указать ссылки которые нужно парсить (из какого-то файла)
    макрос SCANDIR
    парсит только путь файлов со ссылками а не сами ссылки которые находятся внутри этих файлов
     
  6. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    3.243
    Если стандартный список статичный не подходит, и надо подгружать с файла:
    сохраните проект на открытой вкладке "ссылки"
    в списке ссылок должен быть путь до файла где лежат ссылки, чтоб их могло собрать оттуда надо на вкладке "ссылки" указать среди каких меток каждая ссылка например href="{get}"
     
  7. TeslaCo

    TeslaCo Member Пользователи

    Регистрация:
    4 мар 2014
    Сообщения:
    147
    не понял, напишите на примере что нужно вставлять во вкладку ссылки
    C:\content\12.txt - путь файла

    в нем ссылки просто с новой строки
    HTML:
    http://people.passion.ru/zvezdnye-novosti/blagotvoritelnost/shakira-otdast-zarabotannoe-detyam-99064.htm
    http://people.passion.ru/zvezdnye-novosti/lyubov/u-armena-dzhigarkhanyana-tridtsatiletnyaya-muza-99053.htm
    http://mama.passion.ru/novosti-i-sobytiya/deti/babushki-meshayut-detyam-razvivatsya-99046.htm
    http://people.passion.ru/zvezdnye-novosti/zdorove/khyu-dzhekman-boretsya-s-rakom-kozhi-99045.htm
    http://people.passion.ru/zvezdnye-novosti/razvody/dzhennifer-lourens-brosila-krisa-martina-99044.htm
    http://people.passion.ru/zvezdnye-novosti/krasota/rene-zellveger-bolshe-ne-kommentiruet-svoe-novoe-litso-99043.htm
     
  8. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    3.243
    1. В функции "поиск между тегами" добавьте
    2. В фильтре ссылок в поле "поиск-замена" добавьте
     
  9. Root

    Root Администратор Команда форума Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    9.663
    Город:
    Сочи
    Вышеупомянутая функция "поиска между тегами" находится в: вкладка "ссылки" -> группа "парсинг и обработка" -> кнопка "настройка функции поиска ссылок".

    Фильтры ссылок вызываются при нажатии ctrl+3.
     
  10. emkub

    emkub Member Пользователи

    Регистрация:
    16 мар 2015
    Сообщения:
    88
    Здравствуйте.
    Сложность с автоматизацией...
    Есть десяток проектов, которые запускаются подряд из планировщика CD. НО, если в планировщике Windows настроить автозапуск первого проекта (из которого должны запускаться последующие), то этот первый проект отрабатывает и останавливается.
    Подскажите пожалуйста, как настроить правильно?
     
  11. Root

    Root Администратор Команда форума Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    9.663
    Город:
    Сочи
    Здравствуйте.

    Если используете планировщик Windows, "вбивайте" туда все ваши проекты.

    С уважением к вам, Сергей.
     
  12. TeslaCo

    TeslaCo Member Пользователи

    Регистрация:
    4 мар 2014
    Сообщения:
    147
    Здравствуйте.
    Какой аргумент поставить в windows планировщике что бы в начале запускался:
    - сканер сайтов в заданном проекте?
    - нажалась кнопка сгенерировать ссылки (и выбрать как)?
    - применить фильтр к списку ссылок?
     
    Последнее редактирование: 8 окт 2018
  13. inotoxic

    inotoxic Well-Known Member Пользователи

    Регистрация:
    13 сен 2015
    Сообщения:
    287
    Можно через встроенный планировщик
    1)
    [​IMG]
    2) указываете стартовый url
    [​IMG]
    3)предварительно настраиваете фильтр ссылок
     
    kagorec нравится это.
  14. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    3.243
    Можно Winsows планировщиком запускать проект с командами (как подробно описано в этой теме выше), после этот проект может запускать следующий проект через батник в ctrl+u

    [​IMG]


    Во как отметили в предидущем сообщении, в сканере галочкй отметьте и список ссылок что в очереди запомнится при сохранении проекта

    [​IMG]
     
    Последнее редактирование: 8 окт 2018
    xLime и inotoxic нравится это.

Поделиться этой страницей