Парсинг ссылок по ключам

Тема в разделе "Решение различных задач по парсингу", создана пользователем sotex2, 26 дек 2023.

  1. sotex2

    sotex2 Member Пользователи

    Регистрация:
    12 авг 2020
    Сообщения:
    153
    Город:
    нижний новгород
    Доброго времени суток. как спарсить ссылки по ключевому слову. например по ключу АО "ФПК". скрин и файл приложил.
     

    Вложения:

    • скрин.jpg
      скрин.jpg
      Размер файла:
      312,8 КБ
      Просмотров:
      15
    • companium_ru.cdp
      Размер файла:
      45,4 КБ
      Просмотров:
      4
  2. kenny872012

    kenny872012 Well-Known Member Пользователи

    Регистрация:
    18 фев 2018
    Сообщения:
    324
    В поиск-замене для исходного кода выдачи ссылок Ссылки недоступны для гостей

    <table class="table table-lg">{AUTO}table|{AUTO}{GETMETHOD}
    <tr>{AUTO}tr|{AUTO}{GETMETHOD}{ALL}
    [FILTERSTRINGS]АО "ФПК"|keep
     
  3. sotex2

    sotex2 Member Пользователи

    Регистрация:
    12 авг 2020
    Сообщения:
    153
    Город:
    нижний новгород
    Не эффективно, чтобы спарсить ссылки по одному ключу, нужно перебрать весь сайт, где находятся миллионы ссылок.
     
  4. kenny872012

    kenny872012 Well-Known Member Пользователи

    Регистрация:
    18 фев 2018
    Сообщения:
    324
    Зачем перебирать весь сайт? По данной ссылке Ссылки недоступны для гостей всего лишь 10 страниц пагинации, т.е. всего лишь 200 ссылок (если применить данное правило поиск замены и того меньше получится).
     
  5. sotex2

    sotex2 Member Пользователи

    Регистрация:
    12 авг 2020
    Сообщения:
    153
    Город:
    нижний новгород
    Да потомучто ваш код так перебирает весь сайт и по всему сайту ищет ключ - "ао фпк". А у меня таких ключей 20 000. Я уже нашел простое и легкое решение.
     

Поделиться этой страницей