алиэкспресс

Discussion in 'Авторизация на сайтах' started by MadMX, May 4, 2018.

Tags:
  1. MadMX

    MadMX New Member Пользователи

    Joined:
    Apr 3, 2018
    Messages:
    6
    Вопрос к экспертам алиэкспресса, как решается проблема с авторизацией на алиэкспрессе сегодня? потому что часто выбивает на страницу логинов, и программа автоматически пропускает заданные страницы парсинга, потому что вместо страницы с товарами, алиэкспресс перебрасывает на страницу авторизации, а там, ясное дело товаров нет или постоянно придется заполнять капчу, что тоже не вариант.
     
    MadMX, May 4, 2018
    #1
  2. kagorec

    kagorec Администратор Staff Member Администратор

    Joined:
    Jan 3, 2011
    Messages:
    4,442
    Location:
    Latvia
    Так и есть, халява закончилась когда можно было запросто в 50 потоков без авторизации распарсивать.
     
    Last edited: May 4, 2018
    kagorec, May 4, 2018
    #2
  3. MadMX

    MadMX New Member Пользователи

    Joined:
    Apr 3, 2018
    Messages:
    6
    то есть варианта нормального алиэкспресс парсинга средствами content downloader даже в 1-2 потока уже нет? Давно вы лично парсили?
     
    MadMX, May 4, 2018
    #3
  4. Root

    Root Администратор Администратор

    Joined:
    Mar 10, 2010
    Messages:
    14,818
    Город:
    Барнаул
    Прокси разве не помогают?
     
    Root, May 4, 2018
    #4
  5. MadMX

    MadMX New Member Пользователи

    Joined:
    Apr 3, 2018
    Messages:
    6
    дело в том что прокси переадресовывают каждый раз на страницу логина, и программа не может спарсить товар, пропуская действие, ссылка уходит вникуда, приходится заново загружать ссылку
    Может можно было бы сделать так что при переадресации ссылка не исчезала из "списка очереди"?
     
    MadMX, May 5, 2018
    #5
  6. Root

    Root Администратор Администратор

    Joined:
    Mar 10, 2010
    Messages:
    14,818
    Город:
    Барнаул
    Макрос [ADDURL] добавляет ссылку в конец списка.
     
    Root, May 5, 2018
    #6
  7. kagorec

    kagorec Администратор Staff Member Администратор

    Joined:
    Jan 3, 2011
    Messages:
    4,442
    Location:
    Latvia
    Кто немного сталкивался с парсингом aliexpress с 2018 года заметили наверно что можно попарсить немного, потом через 10-1000 товаров блокируется парсинг и выясняется что редиректит на страницу авторизации, и желательно парсить через Wbapp, кстати на странице авторизации могут быть каптчи разного вида например 3 кривых символа на картинке или вдобавок слайдер который надо перетягивать вправо. Было бы неплохо если отпишет еще ктото из присутствующих насчет парсинга али.

    Предполагаю что парсинг массовый возможен при наличии хороших непаблик прокси (от 1000 и более). ИМХО.

    п.с. как нибудь позже отпишу что там выходитчерез прокси.
     
    kagorec, May 5, 2018
    #7
    Root likes this.
  8. Moodys

    Moodys New Member Пользователи

    Joined:
    May 11, 2018
    Messages:
    3
    Город:
    Montevideo
    есть ли успехи?
     
    Moodys, May 11, 2018
    #8
  9. Stan

    Stan Active Member Пользователи

    Joined:
    Jun 15, 2011
    Messages:
    501
    в категории товаров ограничение в листинге 100 страниц, как взять больше с категории
    напр.
    Hidden Content:
    **Hidden Content: To see this hidden content your post count must be 2 or greater.**
    может есть какие xml карты? чтобы полностью взять товары с категории
     
    Stan, Nov 19, 2018
    #9
  10. Kreol

    Kreol Модератор Staff Member Модератор

    Joined:
    Jan 6, 2013
    Messages:
    2,666
    Здравствуйте.
    Нужно вытаскивать всю структуру категорий и идти именно по ней, это существенно снизит количество страниц.
    Если все же товаров много, то далее применять фильтры.
    К примеру категория
    Продажа домов->Частные (больше 100 страниц выдачи)
    Продажа домов->под офис
    значит делаем
    Продажа домов->Частные->Цена от 0 до 10000
    Продажа домов->Частные->Цена от 10001 до 50000
    и т.д.
     
    Kreol, Nov 21, 2018
    #10
    Stan likes this.
  11. weresa

    weresa Active Member Пользователи

    Joined:
    Sep 14, 2014
    Messages:
    239
    добрый день. Я так понимаю, вопрос с авторизацией на Алиэкспресс так и остается открытым.. Ссылки откуда принципиально не собрать никак?
     
    weresa, Feb 11, 2019
    #11
Similar Threads
  1. Yuliko

    Как спарсить несколько картинок с Алиэкспресс

    Yuliko, Mar 14, 2013, in forum: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Replies:
    36
    Views:
    12,988
    Yuliko
    May 1, 2015
  2. Yuliko

    Парсинг картинок с Алиэкспресс

    Yuliko, Jun 4, 2014, in forum: Решение различных задач по парсингу
    Replies:
    13
    Views:
    2,993
    Root
    Jul 22, 2014
  3. Света

    АлиЭкспресс

    Света, Sep 18, 2015, in forum: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Replies:
    1
    Views:
    833
    Root
    Sep 18, 2015
  4. sten30

    Алиэкспресс в Wbapp не прогружает полностью страницу

    sten30, May 13, 2017, in forum: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Replies:
    1
    Views:
    834
    kagorec
    May 13, 2017
Loading...

Share This Page