Прокликивание пагинации

Всем привет , смотрел по форуму эти темы. Не мой случа (
есть сайт Ссылки недоступны для гостей
в коде нет страниц типа page-1 и т.д чтобы собрать все страницы с тварами. Все видео что смотрел на эту тему не подходят - как кликать именно по старницам 1-2-3-4 и так до конуа, как создать цикл чтобы он прокликивал и собирал анные со всех страниц. Так как в примерах что в видео не подходят (повторюсь) буду благодарен за помощь, но не просто ищи там а если можно линк как именно это сделать или 1-5 мин видео с ноута с обяснением - спс

 

Привет.

Ссылки собираются во вкладке ссылки. Через post запрос на адрес Ссылки недоступны для гостей. Основными параметрами для post запроса служат [PARAM(1)] использующий макрос {key} (Названия категорий) и [PARAM(2)] использующий макрос {num} (Страница пагинации)



Параметры post запроса для вкладки ссылки задаются в параметрах http запросов программы:



Для извлечения ссылок из получаемого ответа в json формате и подстановке к каждой ссылке id товара, используется правило поиск-замены для загружаемого веб документа:
[JSON]{start}{/start}{end}{/end}{container}products{/container}|[START]{res}[/START]
[START]{get}[/START]|[START]{multiget}[/START]
[START]{"id":{skip},{skip}"url":"{skip}",{skip}}[/START]|"url":"{skip(3)}-id={skip(1)}"





Далее генерируешь ссылки с динамически нарастающим num для прибавления страниц пагинации по мере парсинга:

 

Привет - благодарю за подробности. А как к єтому прийти самому и подбирать методі в зависимости от сайта?

 

Смотреть какие запросы передаются на сайт при прокликивании пагинации в анализе сети в браузере или через программу fiddler и повторять эти запросы в cd
Так же посмотрите гайды по программе на youtube, там все эти методы описаны.

 

Спасибо за совет, та просмотрел уже все видео и по 2 -3 раза) есть похожие ситуации но не совсем - по этому и бывают такие затыки. Хорошо что есть фрум и добрый люди) которые помогут советом.