Не получается собрать ссылки.

Тема в разделе "Парсинг во вкладке "Ссылки"", создана пользователем itser, 25 дек 2014.

  1. itser

    itser New Member Пользователи

    Регистрация:
    21 май 2014
    Сообщения:
    41
    Добрый вечер. Есть у меня такой донор:
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Ну ни в какую не получается собрать с него ссылки. К примеру, вот ссылка:
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Вроде как простейший запрос, к тому же я могу вручную подставить значения в &month=&year= (например &month=1&year=2015) и получить нужную страницу.
    Или еще проще, вот страница с этого сайта
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    А сканер сайтов не находит ни одной страницы с шаблоном "prayerPrintable.php". (
     
  2. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    здравствуйте!
    Вы неправильно настраиваете сканер сайтов.
    Находит он ссылки с prayerDetail
    откуда берутся prayerPrintable.php совсем не понял.
    см. проект
     

    Вложения:

  3. itser

    itser New Member Пользователи

    Регистрация:
    21 май 2014
    Сообщения:
    41
    но ссылки типа
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    все же на этом сайте есть, а сканер их найти не может ни при каких условиях, а с них получить информацию мне было бы проще всего.
    Я собрал ссылки типа
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Теперь мне нужно взять каждую ссылку и подставить в нее значения &month=1&year=2015, &month=2&year=2015, &month=3&year=2015 и так далее. Как это автоматизировать? Не вставлять же каждую ссылку (их около 7000) в генератор списка ссылок.
     
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Предоставьте, пожалуйста адрес WEB-страницы, где есть искомая ссылка и процитируйте нам часть кода этой WEB-страницы с выделением искомой ссылки.

    Тогда и будем говорить дальше.

    Спасибо!
     
  5. itser

    itser New Member Пользователи

    Регистрация:
    21 май 2014
    Сообщения:
    41
    Ссылка
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Форма на этой странице
    <form action="prayerPrintable.php" method="GET">
     
  6. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Сканер сайтов предназначен для парсинга гиперссылок из HTML-кода WEB-документов.

    Приведенный вами код не содержит тегов ссылок:
    А вот пример гиперссылки:
     
  7. itser

    itser New Member Пользователи

    Регистрация:
    21 май 2014
    Сообщения:
    41
    Я собрал ссылки типа
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Теперь мне нужно взять каждую ссылку и подставить в нее значения &month=1&year=2015, &month=2&year=2015, &month=3&year=2015 и так далее. Как это автоматизировать? Не вставлять же каждую ссылку (их около 7000) в генератор списка ссылок.
     
  8. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    Учитесь пользоваться генератором ссылок
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Ссылки недоступны для гостей
     
  9. itser

    itser New Member Пользователи

    Регистрация:
    21 май 2014
    Сообщения:
    41
    то есть вставлять поочередно вручную в окно шаблона генератора ссылок все мои 7000 ссылок на разные города и генерировать для каждой month={num}&year=2015?
     
  10. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
     
  11. itser

    itser New Member Пользователи

    Регистрация:
    21 май 2014
    Сообщения:
    41
    нет у меня списка городов, чтобы я их в {key} подставлял. Я же эти ссылки спарсил с этого же сайта. Разве что обрезать все полученные ссылки, чтобы от ссылки остался только город, потом это список загнать в {key}, потом обрезать с ссылок все штаты, засунуть их в {key2} и для каждого {key} и {key2} сгенерировать month={num}. Я думал может какой-то проще способ есть, это очень не удобно. Хорошо бы, чтобы шаблон для генерации списка ссылок можно было бы загнать несколько ссылок как в моем случае, или чтобы они туда подтягивались из файла.
     
    Последнее редактирование: 26 дек 2014
  12. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    они умеют подтягиватся
    Нажмите жирный зеденый + в левой части программы. Там есть такой пункт.
    Также можно использовать ексель для этого. Но везде нужны знания.
     
  13. АлексейЛапаев

    АлексейЛапаев New Member Пользователи

    Регистрация:
    15 июн 2015
    Сообщения:
    1
    Добрый день. Оо спс тоже помогли.
     

Поделиться этой страницей