алиэкспресс

Тема в разделе "Авторизация на сайтах", создана пользователем MadMX, 4 май 2018.

Метки:
  1. MadMX

    MadMX New Member Пользователи

    Регистрация:
    3 апр 2018
    Сообщения:
    6
    Вопрос к экспертам алиэкспресса, как решается проблема с авторизацией на алиэкспрессе сегодня? потому что часто выбивает на страницу логинов, и программа автоматически пропускает заданные страницы парсинга, потому что вместо страницы с товарами, алиэкспресс перебрасывает на страницу авторизации, а там, ясное дело товаров нет или постоянно придется заполнять капчу, что тоже не вариант.
     
    MadMX, 4 май 2018
    #1
  2. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.433
    Адрес:
    Latvia
    Так и есть, халява закончилась когда можно было запросто в 50 потоков без авторизации распарсивать.
     
    Последнее редактирование: 4 май 2018
    kagorec, 4 май 2018
    #2
  3. MadMX

    MadMX New Member Пользователи

    Регистрация:
    3 апр 2018
    Сообщения:
    6
    то есть варианта нормального алиэкспресс парсинга средствами content downloader даже в 1-2 потока уже нет? Давно вы лично парсили?
     
    MadMX, 4 май 2018
    #3
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Прокси разве не помогают?
     
    Root, 4 май 2018
    #4
  5. MadMX

    MadMX New Member Пользователи

    Регистрация:
    3 апр 2018
    Сообщения:
    6
    дело в том что прокси переадресовывают каждый раз на страницу логина, и программа не может спарсить товар, пропуская действие, ссылка уходит вникуда, приходится заново загружать ссылку
    Может можно было бы сделать так что при переадресации ссылка не исчезала из "списка очереди"?
     
    MadMX, 5 май 2018
    #5
  6. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Макрос [ADDURL] добавляет ссылку в конец списка.
     
    Root, 5 май 2018
    #6
  7. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.433
    Адрес:
    Latvia
    Кто немного сталкивался с парсингом aliexpress с 2018 года заметили наверно что можно попарсить немного, потом через 10-1000 товаров блокируется парсинг и выясняется что редиректит на страницу авторизации, и желательно парсить через Wbapp, кстати на странице авторизации могут быть каптчи разного вида например 3 кривых символа на картинке или вдобавок слайдер который надо перетягивать вправо. Было бы неплохо если отпишет еще ктото из присутствующих насчет парсинга али.

    Предполагаю что парсинг массовый возможен при наличии хороших непаблик прокси (от 1000 и более). ИМХО.

    п.с. как нибудь позже отпишу что там выходитчерез прокси.
     
    kagorec, 5 май 2018
    #7
    Root нравится это.
  8. Moodys

    Moodys New Member Пользователи

    Регистрация:
    11 май 2018
    Сообщения:
    3
    Город:
    Montevideo
    есть ли успехи?
     
    Moodys, 11 май 2018
    #8
  9. Stan

    Stan Active Member Пользователи

    Регистрация:
    15 июн 2011
    Сообщения:
    499
    в категории товаров ограничение в листинге 100 страниц, как взять больше с категории
    напр.
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 2 постов.**
    может есть какие xml карты? чтобы полностью взять товары с категории
     
    Stan, 19 ноя 2018
    #9
  10. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    Здравствуйте.
    Нужно вытаскивать всю структуру категорий и идти именно по ней, это существенно снизит количество страниц.
    Если все же товаров много, то далее применять фильтры.
    К примеру категория
    Продажа домов->Частные (больше 100 страниц выдачи)
    Продажа домов->под офис
    значит делаем
    Продажа домов->Частные->Цена от 0 до 10000
    Продажа домов->Частные->Цена от 10001 до 50000
    и т.д.
     
    Kreol, 21 ноя 2018
    #10
    Stan нравится это.
  11. weresa

    weresa Active Member Пользователи

    Регистрация:
    14 сен 2014
    Сообщения:
    237
    добрый день. Я так понимаю, вопрос с авторизацией на Алиэкспресс так и остается открытым.. Ссылки откуда принципиально не собрать никак?
     
    weresa, 11 фев 2019
    #11
Similar Threads
  1. Yuliko

    Как спарсить несколько картинок с Алиэкспресс

    Yuliko, 14 мар 2013, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    36
    Просмотров:
    11.307
    Yuliko
    1 май 2015
  2. Yuliko

    Парсинг картинок с Алиэкспресс

    Yuliko, 4 июн 2014, в разделе: Решение различных задач по парсингу
    Ответов:
    13
    Просмотров:
    2.624
    Root
    22 июл 2014
  3. Света

    АлиЭкспресс

    Света, 18 сен 2015, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    1
    Просмотров:
    687
    Root
    18 сен 2015
  4. sten30

    Алиэкспресс в Wbapp не прогружает полностью страницу

    sten30, 13 май 2017, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    1
    Просмотров:
    682
    kagorec
    13 май 2017
Загрузка...

Поделиться этой страницей