Помогите новичку спарсить статьи

Тема в разделе "Решение различных задач по парсингу", создана пользователем konfuciy, 13 дек 2013.

  1. konfuciy

    konfuciy New Member Пользователи

    Регистрация:
    10 янв 2013
    Сообщения:
    89
    Пытаюсь спарсить статьи с ресурса pravo.ru
    сгенерировал ссылки такого вида:
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    и т.д. 100 штук

    нашел границы парсинга
    <h1> - начало
    </p> </div> - конец

    установил использовать эти границы


    нажимаю предпросмотр, во всех документах пишет
    1 Результирующий документ оказался пустым. либо
    2 Программе не удалось загрузить страницу. Возможные причины: - Некорректный адрес; - Программа не может получить доступ в интернет; - Сайт блокирует ваши запросы.

    пробовал с проксями и без них, все одно и то же.

    что не так делаю?
     
    Последнее редактирование: 9 янв 2014
    konfuciy, 13 дек 2013
    #1
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.
    Лучше прикрепить файл проекта.
     
    Root, 13 дек 2013
    #2
  3. konfuciy

    konfuciy New Member Пользователи

    Регистрация:
    10 янв 2013
    Сообщения:
    89
    Прикладываю
     

    Вложения:

    • pravo_ru.cdp
      Размер файла:
      30,9 КБ
      Просмотров:
      1
    konfuciy, 13 дек 2013
    #3
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Ссылки недоступны для гостей
     
    Root, 13 дек 2013
    #4
  5. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Шаблон вывода у вас пустой.
    Задайте границы парсинга и вставьте их макросы в шаблон вывода. Хорошо бы вам сначала почитать хелп Ссылки недоступны для гостей
     
    Root, 13 дек 2013
    #5
  6. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.433
    Адрес:
    Latvia
    Странно решили собирать ссылки (генерируя) если можно быстрее собрать по пагинации.
    Прикладываю пример настройки, открыв остается нажать просто F5 :soccer:
    На основе этой настройке возможно полезно будет разобраться как лучше делать
     

    Вложения:

    kagorec, 13 дек 2013
    #6
  7. konfuciy

    konfuciy New Member Пользователи

    Регистрация:
    10 янв 2013
    Сообщения:
    89
    спасибо Root и kagorec, попробкю разобраться.
    насколько я понял ввел параметры для парсинга, но не ввел параметры для вывода спарсенных статей в файлы из программы, в этом основная ошибка?
     
    konfuciy, 14 дек 2013
    #7
  8. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Пожалуйста.
    Зачем гадать, сделайте все, как написано тут Ссылки недоступны для гостей и будет все выводить.
    Задача тривиальная.
     
    Root, 14 дек 2013
    #8
Similar Threads
  1. CD3 user

    Помогите новичку .

    CD3 user, 25 мар 2013, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    1
    Просмотров:
    1.631
    kagorec
    25 мар 2013
  2. Namron

    Помогите спарсить статьи

    Namron, 11 авг 2013, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    2
    Просмотров:
    1.080
    Namron
    12 авг 2013
  3. romanvl

    Помогите новичку спарсить базу резюме)) сайт под хайдом

    romanvl, 25 фев 2014, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    8
    Просмотров:
    1.614
    progger
    27 фев 2014
  4. Yarius

    Помогите новичку

    Yarius, 23 ноя 2014, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    1
    Просмотров:
    1.170
    Kreol
    23 ноя 2014
  5. Arless

    Помогите новичку

    Arless, 14 апр 2015, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    283
    Просмотров:
    22.732
    Root
    19 мар 2017
Загрузка...

Поделиться этой страницей