Как спрасить категории с подкатегориями

Тема в разделе "Парсинг конкретных сайтов по запросу (ПЛАТНО)", создана пользователем AntonFix, 20 авг 2015.

Метки:
  1. AntonFix

    AntonFix New Member Пользователи

    Регистрация:
    29 окт 2014
    Сообщения:
    30
    Здравствуйте.
    Есть сайт
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Как на нем спарсить категории с подкатегориями в csv-файл с заголовками?
     
  2. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.442
    Адрес:
    Latvia
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Указывайте границами, чтото не получается?
    Материалы по теме:
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
     
  3. AntonFix

    AntonFix New Member Пользователи

    Регистрация:
    29 окт 2014
    Сообщения:
    30
    Наверное я не так выразился.
    Меня интересует только сам текст, название категорий -> подкатегорий. А сами товары не нужны.
     
  4. AntonFix

    AntonFix New Member Пользователи

    Регистрация:
    29 окт 2014
    Сообщения:
    30
    Да, границы задал. Теперь все парсится корректно. Спасибо за совет!
    Но не могу понять как собрать страницы с категориями.
     
  5. AntonFix

    AntonFix New Member Пользователи

    Регистрация:
    29 окт 2014
    Сообщения:
    30
    И все же не получается.
    Я не понимаю с какой стороны подойти к сайту?
    Откуда начать сбор ссылок, чтобы собрать только категории?
    Не думаю что надо парсить ВСЕ товары (пару миллионов), а потом удалять дубликаты.

    Посоветуйте, пожалуйста. Мне сего-лишь нужны названия категорий с подкатегориями.

    Очень прошу помощи.
     
  6. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.442
    Адрес:
    Latvia
    Хорошо что освоили как задать границы.
    Теперь пора освоить как пользоваться сборщиком ссылок:
    Ссылки недоступны для гостей
    Во вкладке ссылки задать в списке ссылки категорийные и т.д.
     
  7. AntonFix

    AntonFix New Member Пользователи

    Регистрация:
    29 окт 2014
    Сообщения:
    30
    Спасибо за ответ.
    Я уже третий день читаю документацию, чтобы понять с какой стороны подойти к сайту.
    Проблем с заданием границ нет. Да и не было, в целом.

    Не могу понять с чего начать парсинг. А еще для Категорий и Подкатегорий (всего 4 уровня) везде одни и те же теги прописаны, а также все ссылки (даже вложенные подкатегории) все имеют 1 уровень:
    Что так Ссылки недоступны для гостей.all.biz/ru/mebel-i-interer-bgm310 (МЕБЕЛЬ И ИНТЕРЬЕР, Категория, 1-й уровень)
    Что вот так Ссылки недоступны для гостей.all.biz/ru/mebel-dlya-obshchej-komnaty-bgc426 (МЕБЕЛЬ ДЛЯ ОБЩЕЙ КОМНАТЫ, Подкатегория 3-й уровень).

    Мне нужно сделать для себя список категорий с подкатегориями в Экселе. Ссылки, товары, картинки мне не надо.

    Я не могу понять как это сделать. Окей, спарсил первый уровень. Как парсить второй и привязаться его к Первому уровню? Как парсить Второй уровень и привязать ко Второму уровню. И т.д.

    Подскажите, пожалуйста. Буду благодарен.
     
  8. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.442
    Адрес:
    Latvia
    На рассматриваемом ресурсе только постепенно, собрать сначало первую вложенность потом вторую, потом третью потом четвертую и потом пятую если есь. Все делается вручную и каждый этап это задание ссылок в фильтры те которые собрали ранее.
     
  9. AntonFix

    AntonFix New Member Пользователи

    Регистрация:
    29 окт 2014
    Сообщения:
    30
    Спасибо большое, так и буду делать.
     

Поделиться этой страницей