Помогите с парсингом (выйти из тупика)

Тема в разделе "Решения по парсингу популярных сайтов", создана пользователем plitochnik77, 30 июл 2014.

  1. plitochnik77

    plitochnik77 New Member Пользователи

    Регистрация:
    27 июл 2014
    Сообщения:
    10
    Нужно спарсить сайт
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Пробую спарсить хотя бы один товар. Делаю по принципу "Как парсить контент, которого нет в коде страницы (контент подгружается скриптами)" т.к. характеристики открываются во всплывающем окне. Но на этапе определения POST параметров в Live HTTP все стопорится, не могу найти. Помогите советом. Спасибо!
     
    Последнее редактирование: 1 авг 2014
    plitochnik77, 30 июл 2014
    #1
  2. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    Здравствуйте!
    Все как всегда на поверхности.
    1) Проходим авторизацию (кнопочка ключик, на вкладке контент)
    2) заходим на страничку
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    и парсим ссылки вида
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    либо вообще их просто создаем в генераторе (от 1 до 50000)
    3) создаем нужные границы и парсим.
     
    Kreol, 30 июл 2014
    #2
  3. plitochnik77

    plitochnik77 New Member Пользователи

    Регистрация:
    27 июл 2014
    Сообщения:
    10
    Т.е. парсинг с заданием обычных границ внутри повторяющихся - здесь не при чем?(я так думал делать)
     
    plitochnik77, 30 июл 2014
    #3
  4. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    ну право как реализовывать принадлежит исключительно вам.
    Вы спрашивали как, я подсказал.
     
    Kreol, 30 июл 2014
    #4
  5. plitochnik77

    plitochnik77 New Member Пользователи

    Регистрация:
    27 июл 2014
    Сообщения:
    10
    Спасибо большое, будем мучить дальше)
     
    plitochnik77, 31 июл 2014
    #5
  6. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Если будут еще вопросы. Пожалуйста, обращайтесь.
     
    Root, 31 июл 2014
    #6
  7. plitochnik77

    plitochnik77 New Member Пользователи

    Регистрация:
    27 июл 2014
    Сообщения:
    10
    Еще вопрос, почему в карточке товара по адресу
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    крякозябры(неправильно отображается текст)? Спасибо
     
    plitochnik77, 31 июл 2014
    #7
  8. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Кодировка выбирается слева-вверху в инструменте задания границ парсинга (ctrl+f1). Там по умолчанию стоит AUTO, пробуйте разные кодировки.
     
    Root, 31 июл 2014
    #8
  9. plitochnik77

    plitochnik77 New Member Пользователи

    Регистрация:
    27 июл 2014
    Сообщения:
    10
    Пробовал менять кодировку, но именно в окне браузера карточка товара со свойствами - все в крякозябрах
     
    plitochnik77, 1 авг 2014
    #9
  10. plitochnik77

    plitochnik77 New Member Пользователи

    Регистрация:
    27 июл 2014
    Сообщения:
    10
    [​IMG]
     

    Вложения:

    • 3.jpg
      3.jpg
      Размер файла:
      34,9 КБ
      Просмотров:
      3
    plitochnik77, 1 авг 2014
    #10
  11. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    Вы не слушаете. Выберите кодировку UTF-8 и не смотрите что внизу кракозябра в браузере. Это не самое главное
    Код в нужной кодировке
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Вы ведь не из браузера забираете данные, а из кода странички. Не всегда внешний вид будет правильно отображаться.
     
    Kreol, 1 авг 2014
    #11
  12. plitochnik77

    plitochnik77 New Member Пользователи

    Регистрация:
    27 июл 2014
    Сообщения:
    10
    Так код изначально был в правильной кодировке, я на перспективу. Т.к. при выделении крякозябры в коде не ищется место
     
    plitochnik77, 1 авг 2014
    #12
  13. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    Так бывает. С этим ничего не поделаешь.
    Если хотите настроить именно по кракозябрам, выберите кодировку ANSI настройте, но парсить надо с UTF-8
     
    Kreol, 1 авг 2014
    #13
  14. plitochnik77

    plitochnik77 New Member Пользователи

    Регистрация:
    27 июл 2014
    Сообщения:
    10
    Понял . Спасибо!
     
    plitochnik77, 1 авг 2014
    #14
  15. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Вводите в окно поиска вручную нужные слова. Explorer не всегда верно определяет кодировку (хотя у меня с этим проблем не было), а он используется для отображения HTML-страниц в программе.
     
    Root, 1 авг 2014
    #15
Similar Threads
  1. anna-max

    Помогите с парсингом.

    anna-max, 10 апр 2012, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    3
    Просмотров:
    2.305
    Valiks
    10 апр 2012
  2. pakimov

    Помогите с парсингом

    pakimov, 5 май 2014, в разделе: Решение различных задач по парсингу
    Ответов:
    1
    Просмотров:
    959
    Root
    5 май 2014
  3. Apokalepsys

    Помогите с парсингом ссылок.

    Apokalepsys, 2 авг 2014, в разделе: Парсинг во вкладке "Ссылки"
    Ответов:
    1
    Просмотров:
    1.167
    Kreol
    2 авг 2014
  4. mashurov

    Помогите плиз с парсингом

    mashurov, 29 окт 2014, в разделе: Парсинг во вкладке "Ссылки"
    Ответов:
    3
    Просмотров:
    1.023
    Root
    29 окт 2014
  5. dava002

    Помогите с парсингом

    dava002, 30 июл 2015, в разделе: Решение различных задач по парсингу
    Ответов:
    11
    Просмотров:
    1.775
    kagorec
    31 июл 2015
Загрузка...

Поделиться этой страницей