Парсинг с авторизацией

Тема в разделе "Авторизация на сайтах", создана пользователем starii, 16 май 2019 в 10:00.

  1. starii

    starii New Member Пользователи

    Регистрация:
    Четверг
    Сообщения:
    5
    Город:
    Иркутск
    Привет. Не удается спарсить сайт, т.к. там используется авторизация. Перепробовал:
    делаю авторизацию через браузер и передаю куки - авторизуется, передает, куки содержат данные авторизации, но сайт не парсится (предварительный просмотр работает!) Второе - делаю авторизацию через post - опять не выходит.

    Для примера ссылки которые пытаюсь спарсить - они не работают до авторизации.

    Буду благодарен за помощь.

    Данные аккаунта в хайде.
     
    Последнее редактирование: 18 май 2019 в 12:08
  2. Djahat

    Djahat Well-Known Member Пользователи

    Регистрация:
    14 янв 2013
    Сообщения:
    351
    они что то все 404
     
  3. starii

    starii New Member Пользователи

    Регистрация:
    Четверг
    Сообщения:
    5
    Город:
    Иркутск
    Надо авторизоваться
     
  4. Root

    Root Администратор Команда форума Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    10.559
    Город:
    Сочи
    Здравствуйте.

    Авторизовался во встроенном браузере вот так и передал cookie

    2019-05-16_18-00-24.png

    После чего спарсил в 10 потоков 78 товаров и авторизация на месте

    2019-05-16_17-58-12.png

    Не понимаю проблемы.
     
  5. starii

    starii New Member Пользователи

    Регистрация:
    Четверг
    Сообщения:
    5
    Город:
    Иркутск
    Спасибо. Прилагаю запись экрана. Делаю точно так же (или нет?)
    Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме!
     
  6. Root

    Root Администратор Команда форума Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    10.559
    Город:
    Сочи
    1) Обновите программу
    2) Приложите проект
     
  7. starii

    starii New Member Пользователи

    Регистрация:
    Четверг
    Сообщения:
    5
    Город:
    Иркутск
    Обновил программу, все заработало. Спасибо
     
  8. starii

    starii New Member Пользователи

    Регистрация:
    Четверг
    Сообщения:
    5
    Город:
    Иркутск
    Прошу почистить тему от всех ссылок и изображений.
     

Поделиться этой страницей