Парсит не всё

Тема в разделе "Решение различных задач по парсингу", создана пользователем makar, 1 мар 2024.

  1. makar

    makar New Member Пользователи

    Регистрация:
    11 дек 2023
    Сообщения:
    14
    Симпатии:
    0
    Почему то фото парсит во всех обьявлениях, а остальные границы пропускает, парсю на авито
    позавчера все четко работало
    поток 1, пауза стоит межжду запросами
    upload_2024-3-1_0-54-11.png
     

    Вложения:

    • avito.cdp
      Размер файла:
      47,1 КБ
      Просмотров:
      0
    Последнее редактирование: 1 мар 2024
  2. masrub

    masrub Well-Known Member Пользователи

    Регистрация:
    29 июн 2018
    Сообщения:
    250
    Симпатии:
    75
    Без приложенного проекта вам смогут дать только абстрактные ответы.
     
  3. makar

    makar New Member Пользователи

    Регистрация:
    11 дек 2023
    Сообщения:
    14
    Симпатии:
    0
    начал так парсить после того как ноут выключился из за того что сел
    случайно тк много прикрепил, все одинаковые
     

    Вложения:

    • avito.cdp
      Размер файла:
      47,1 КБ
      Просмотров:
      0
    • avito.cdp
      Размер файла:
      47,1 КБ
      Просмотров:
      0
    • avito.cdp
      Размер файла:
      47,1 КБ
      Просмотров:
      0
    • avito.cdp
      Размер файла:
      47,1 КБ
      Просмотров:
      0
    • avito.cdp
      Размер файла:
      47,1 КБ
      Просмотров:
      0
  4. makar

    makar New Member Пользователи

    Регистрация:
    11 дек 2023
    Сообщения:
    14
    Симпатии:
    0
    upload_2024-3-1_14-59-27.png
    думаю дело в этом, код меняется
     
  5. LulzSec_ru

    LulzSec_ru New Member Пользователи

    Регистрация:
    15 май 2022
    Сообщения:
    59
    Симпатии:
    4
    Скорее у Вас с границами проблемы. Начало границы <h1{skip}>, будет работать лучше
     
  6. makar

    makar New Member Пользователи

    Регистрация:
    11 дек 2023
    Сообщения:
    14
    Симпатии:
    0
    upload_2024-3-2_14-41-27.png
    когда наводишь на то что нужно спарсить и жмешь ф4, он просто не находит в коде ( тут я жмякал на характеристики размер), авито не прогружается
     
  7. LulzSec_ru

    LulzSec_ru New Member Пользователи

    Регистрация:
    15 май 2022
    Сообщения:
    59
    Симпатии:
    4
    <ul class="params-paramsList{skip}> дальше dinamicvalue и все

    Вам нужно почитать справку...
     
  8. makar

    makar New Member Пользователи

    Регистрация:
    11 дек 2023
    Сообщения:
    14
    Симпатии:
    0
    не совсем понял, это вы границы парсинга указали? подскажите что изучить почитать на курсе
     
  9. LulzSec_ru

    LulzSec_ru New Member Пользователи

    Регистрация:
    15 май 2022
    Сообщения:
    59
    Симпатии:
    4
    Да. Это общая граница парсинга блока характеристик. Метод skip использую на случай различий в коде (<ul class="params-paramsList-_awNW">. awNW эта часть кода может быть динамической)


    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
     
  10. makar

    makar New Member Пользователи

    Регистрация:
    11 дек 2023
    Сообщения:
    14
    Симпатии:
    0
    Спасибо, получается мне нужно все границы переделать, а с повторяющимися я вообще захлебнусь, очень долго в этом разбираться
    раньше не было такой проблемы с доступом к авито, может быть можно по другому решить как то? из за чего авито может быть недоступен, что это за явление не подскажите? читал что при частых запросах банит, это не то же самое?
     
  11. LulzSec_ru

    LulzSec_ru New Member Пользователи

    Регистрация:
    15 май 2022
    Сообщения:
    59
    Симпатии:
    4
    У Вас пропуски в документе из-за кривых границ. Как не крути поучиться нужно. Ну банит и чего? С банами все проще. Используйте прокси либо играйтесь с паузой
     
  12. makar

    makar New Member Пользователи

    Регистрация:
    11 дек 2023
    Сообщения:
    14
    Симпатии:
    0
    upload_2024-3-2_17-2-8.png
    добавил бесплатных прокси, результата не дало, не подскажите что не так делаю?
     

Поделиться этой страницей