Парсинг титлов в индексе Яши

Тема в разделе "Парсинг конкретных сайтов по запросу (ПЛАТНО)", создана пользователем gurenovich, 20 авг 2012.

  1. gurenovich

    gurenovich New Member Пользователи

    Регистрация:
    20 авг 2012
    Сообщения:
    9
    В чем суть. Нужно было спарсить титлы проиндексированных страниц. Это я сделал в первый ап жизни сайта без проблем (настроил повторяющиеся границы и т.д) Ибо тогда в индексе было только 50 страниц.

    В недавний ап 1 августа добавилось 100 страниц. Мне нужно спарсить титлы этих 100 страниц, при этом отфильтровать 50 титлов, с которыми я уже поработал. Как это сделать ума не приложу - уже второй день...

    P.S. парсинг проводится по такому адресу - Ссылки недоступны для гостей

    На руках есть Контент Донвлоадер, титлы 50 страниц, с которыми провел нужные работы и нотепад ++
     
  2. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.442
    Адрес:
    Latvia
    Используйте функцию "поиск-замена"
    пример:
    ... так для всех 50 ваших титлов которые не нужны
     
  3. gurenovich

    gurenovich New Member Пользователи

    Регистрация:
    20 авг 2012
    Сообщения:
    9
    Такая тема не подходит :(
    Титлов намного больше, а не 50 штук... К каждому титлу добавлять | - нереально. Как-то можно процесс автоматизировать ?
     
  4. gurenovich

    gurenovich New Member Пользователи

    Регистрация:
    20 авг 2012
    Сообщения:
    9
    В общем пока сделал так:
    1) Спарсил все титлы 100 штук
    2) 50 титлов у меня были сохранены на компе, которые были проиндексированы с первый ап
    3) Залил титлы в кей коллектор 100 штук
    4) добавил в стоп слова 50 штук титлов, которые нужно отсеять и поставил галочку - точное соответствие.
    5) Отмеченные (не нужные) титлы удалил

    Напрягает что нужно слова - туда-сюда копировать. Был бы рад, если бы сделали в КД фильтр по ключевым словами (тогда не нужные слова бы не парсились)
     
  5. Valiks

    Valiks New Member Супер Модератор

    Регистрация:
    18 янв 2012
    Сообщения:
    554
    Адрес:
    Всё время в скэйпе
    Фильтр уже есть, смотрите, рядом с "настройкой шаблонов"
     
  6. gurenovich

    gurenovich New Member Пользователи

    Регистрация:
    20 авг 2012
    Сообщения:
    9
    Фильтрация документов по списку ключевиков? - это не то...
    Я пробовал. Вставлял ключи, которые нужно отфильтровать и ставил не загружать документ. В итоге все страницы, которые должны парсится - оказались пустыми. Ибо как только прога находит ключ, который нужно отфильтровать - она фильтрует всю страницу...
     

Поделиться этой страницей