Парсинг сайта с подгружаемым содержимым

Тема в разделе "Решения по парсингу популярных сайтов", создана пользователем bobser, 16 окт 2015.

  1. bobser

    bobser New Member Пользователи

    Регистрация:
    16 окт 2015
    Сообщения:
    7
    Здравствуйте!

    Подскажите пожалуйста, как правильно настроить Content Downloader для парсинга сайта mebelshop.com? Дело в том, что контент у этого сайта подгружается с помощью явы, или аякса. Т.е. в браузере содержимое отображается, а в коде этого нет(

    Умеет ли Content Downloader парсить такие сайты? Пример такой страницы:
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Там модули внизу страницы подгружаются скриптом, т.е. в исходном коде их нет. И нет возможности проставить границы парсинга. Может быть какие то специальные настойки есть для этого?
     
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Нажмите ctrl+h и включите Internet Explorer (DOM).

    Должно помочь!

    С уважением к вам, Сергей.
     
  3. bobser

    bobser New Member Пользователи

    Регистрация:
    16 окт 2015
    Сообщения:
    7
    К сожалению, не помогло( Там, скорее всего стоит подгрузка через событие "скроллинг страницы".. Можно как-то настроить эмуляцию скроллинга?
     
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Ссылки недоступны для гостей

    Используйте для этой цели следующий список событий WBApp:
    :yes:
     
  5. bobser

    bobser New Member Пользователи

    Регистрация:
    16 окт 2015
    Сообщения:
    7
    Спасибо! Всё работает) Отличная программа, просто супер!!!
     
  6. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Спасибо!
     

Поделиться этой страницей