Парсинг сайта

[Sherminator]

Доброго времени суток, решил поднатореть в парсинге сайтов на запросах, и на первом же тестовом сайте зашел в тупик

Есть вот страница с товарами https://cnp.one/vertikal-nye-mnogostupenchatye-nasosy.html?limit=10#page=1

Делаю на нее запрос, получаю html коллекцию, всё это дело через агилитипак разбираю, все норм.
Но вот момент с переходом на следующую страницу мне вообще не понятен, переход осуществляется нажатием кнопки "Показать еще" в низу страницы, при этом ссылка в браузере меняется на https://cnp.one/vertikal-nye-mnogostupenchatye-nasosy.html?limit=10#page=2 и в моем понимании делая запрос на эту ссылку я уже должен буду получить товары со второй страницы, но в итоге получаю все равно с первой. Я как понимаю там JS прикручен для перехода на следующую страницу. А как мне с помощью запросов гулять по страницам? Может кто нибудь направить в нужную сторону?

 

[Phoenix78]

там для пагинации вроде такие запросы

cnp.one/vertikal-nye-mnogostupenchatye-nasosy.html?limit=12&is_ajax=1&p=2&is_scroll=1
cnp.one/vertikal-nye-mnogostupenchatye-nasosy.html?limit=12&is_ajax=1&p=3&is_scroll=1
cnp.one/vertikal-nye-mnogostupenchatye-nasosy.html?limit=12&is_ajax=1&p=4&is_scroll=1

 

[Sherminator]

там для пагинации вроде такие запросы

cnp.one/vertikal-nye-mnogostupenchatye-nasosy.html?limit=12&is_ajax=1&p=2&is_scroll=1
cnp.one/vertikal-nye-mnogostupenchatye-nasosy.html?limit=12&is_ajax=1&p=3&is_scroll=1
cnp.one/vertikal-nye-mnogostupenchatye-nasosy.html?limit=12&is_ajax=1&p=4&is_scroll=1

там для пагинации вроде такие запросы

cnp.one/vertikal-nye-mnogostupenchatye-nasosy.html?limit=12&is_ajax=1&p=2&is_scroll=1
cnp.one/vertikal-nye-mnogostupenchatye-nasosy.html?limit=12&is_ajax=1&p=3&is_scroll=1
cnp.one/vertikal-nye-mnogostupenchatye-nasosy.html?limit=12&is_ajax=1&p=4&is_scroll=1

Работает, а принцип построения ссылки не затруднит поподробнее описать?

 

[Phoenix78]

Работает, а принцип построения ссылки не затруднит поподробнее описать?

открыл зенку, зашел на сайт, нажал на кнопочку, подсмотрел что в мониторе трафика вываливается. я же не умею с запросами работать, только через костыли подглядываю

 

[backoff]

 

[Sherminator]

Посмотреть вложение 95794

Да я уже вкурил где эта ссылка берется) Думал просто что это какое то высшее колдунство по построению ссылку) А всё как обычно оказалось в разы проще

 

[backoff]

ну иногда ява такая, что реально колдунство, бывает сам не одупляюсь откуда инфа берется, когда компилируются несколько яв в один с разных углов, короче как нить встретишь такое ))