Генерация списков ссылок

Добавить данные к отфильтрованным ссылкам

invalid@example.com (Doronik) — Wed, 03 Jun 2026 19:57:09 +0000

Список ссылок после фильтрации
https://0734903058.rieltor.ua/
https://0730492707.rieltor.ua/
https://0730255827.rieltor.ua/
Как добавить следующие данные в каждую ссылку для парсинга контента
/deals/?page=1
/deals/?page=2
/deals/?page=3

Надо, чтобы получилось
https://0734903058.rieltor.ua/deals/?page=1
https://0734903058.rieltor.ua/deals/?page=2
https://0734903058.rieltor.ua/deals/?page=3...

Добавить данные к отфильтрованным ссылкам

Генерация ссылок с динамическим num во вкладке "контент"

invalid@example.com (mas) — Wed, 16 Oct 2024 21:26:30 +0000

Всем привет, я правильно понимаю, что во вкладке "Контент" никак нельзя генерировать ссылки с динамическим {num} ? Мне необходимо пройтись по разным услугам на разных страницах пагинации и собрать не только ссылки, но и заголовки и рейтинг. Удобно было бы, если в "Контенте" можно было работать с динамическими ссылками.
Посмотреть вложение 11336

Как парсить страницы ссылки у которых разные но ведут на один адрес?

invalid@example.com (MiloNNe) — Wed, 20 Jul 2022 08:04:58 +0000

Возникла такая проблема: при парсинге подобной 2gis.ru/search/Ремонт%20промышленного%20оборудования/page/88 вне зависимости от номера страницы в ней она всегда на первую и соответственно парсится так же только первая страница. Как можно решить данную проблему?

Как парсить рубрики сайта если количество страниц пагинации в них неизвестно

invalid@example.com (sinoda) — Wed, 24 Nov 2021 17:03:00 +0000

Здравствуйте Сергей и Участники форума ! Прошу Вас подсказать или навести на мысли как сгенерировать список ссылок пагинаций. У меня есть список ссылок с общим кол-вом пагинаций, т.е.
куртки 965
брюки 485
и т.д. около 1000 полей...
Первое поле (куртки 965) означает что на сайте есть 965 страниц пагинаций (страниц с сылками на товары), т.е расширенный список
куртки_1...

Как парсить рубрики сайта если количество страниц пагинации в них неизвестно

Генерация списка ссылок с вложенными категориями с пагинацией

invalid@example.com (Gnom41k) — Fri, 09 Oct 2020 23:28:12 +0000

Доброго времени и крепкого психологического здоровья ))
Задача получить список ссылок на товары из вложенных категорий...

Генерация списка ссылок с вложенными категориями с пагинацией

Как сгенерировать варианты {key} у списка ссылок?

invalid@example.com (AlexandrSorokin) — Wed, 20 May 2020 01:57:57 +0000

Привет!
Есть пару сотен тысяч ссылок:

Код:

yandex.ru
google.com
mail.ru

Как добавить в конец к каждой такие варианты?

Код:

/about
/contact
/o-nas

Как если бы использовали

Код:

site.ru{key}{key2}

После чего сгенерируется весь список вариантов
Но это для одного сайта, а нужно для целого списка

Как составить список таких ссылок

invalid@example.com (wihr) — Tue, 12 May 2020 06:32:14 +0000

Здравствуйте.
Есть сайт на нем ссылки типа http://site.ru/?NzU0NjA1NTM6
как можно сгенерировать такие ссылки все

Если что последний символ это что то типа контрольной суммы

Список ссылок с проверкой на вхождение в исходном коде

invalid@example.com (Polar) — Wed, 08 Apr 2020 15:08:32 +0000

На сайте ссылки на товары идут в таком виде
https://www.site.ru/goods/id29549
Номер id может быть разный и они не идут по порядку, могу ли я использовать как-то {num} для генерации списка ссылок, задавая диапазон например 20000-600000 и проверять код страницы на вхождение определенных слов, к примеру если на странице будет 404, то не добавлять ссылку.

перебор {key} и {key2} с бесконечным {num}

invalid@example.com (imya) — Wed, 11 Dec 2019 20:20:07 +0000

https://ibb.co/Rj8sk6Z
при заполненных {key} и {key2}
можно сделать еще несколькими путями, но они дольше и заморочнее. а если бы получилось прям вот так - было бы круче..

Генерация ссылок с использованием двух разных {num}

invalid@example.com (Constantine) — Wed, 14 Nov 2018 08:19:53 +0000

Добрый день. Не могу разобраться как сгенерировать ссылку если меняется 2 параметра. Мне надо 2 {num} с разными диапазонами. Пробовал сканер сайтов - подтягивает очень много мусора даже при настроенном фильтре. Если пользоваться шаблоном ссылок, то выдает также много ненужных комбинаций. Подскажите как можно решить проблему, плизз!

Генерация ссылок site/{key}/{key2} без num

invalid@example.com (bek) — Mon, 12 Mar 2018 13:44:22 +0000

Сайт с динамическим контентом парсить не получается,
возможно получить только список в виде file.json "5348", "content.html",
то есть если вставить
в {key} "5348" в {key2} "content.html" получим все ссылки сайта
site/{key}/{key2}
Вопрос как можно отключить num оставив только значения key и key2

Функция [PARAM] - Передавать значение [PARAM] от родительской ссылки к найденой

invalid@example.com (QuZ) — Wed, 30 Aug 2017 19:21:29 +0000

Добрый день. Решил ознакомится новой для меня функцией [PARAM], по видеоролику http://sbfactory.ru/cd/?p=2569 . Так вот там, на 7-мой минутке, 56 секунде, уважаемый человек просит нажать кнопку - Передавать значение [PARAM] от родительской ссылки к найденой. Но Где она?)) У меня на 1-ну кнопку меньше кнопочек и как раз ее нет, на панельки - Парсинг и обработка)))

Где найти эту фишку?

Спасибо.