Сложности с Get запросом

[SlavenTyz]

Всем привет, изучаю Post-Get запросы и насколько я понял из видео уроков, что Get запрос это и есть загруженная страница и в переменную складывается все значения этой страницы. Тогда почему если я загрузил страницу и для этой же странице сделал Get запрос, на странице копирую нужную строчку с названием, а в Get запросе не могу найти это значение

 

[Valandersi]

А код гет запроса смотрели? cloudflare есть на сайте?

 

[doc]

потому что на странице в браузере есть туча скриптов, которые что-то генериют, подгружают и всячески меняют/дополняют страницу

 

[SlavenTyz]

А код гет запроса смотрели? cloudflare есть на сайте?

Гет запроса копирую из переменой и вставляю в блокнот. В блокноте через поиск ищу нужные значения и ни чего такого найти не могу, включая cloudflare

 

[Valandersi]

Гет запроса копирую из переменой и вставляю в блокнот. В блокноте через поиск ищу нужные значения и ни чего такого найти не могу, включая cloudflare

значит ответ выше @doc написал

 

[SlavenTyz]

потому что на странице в браузере есть туча скриптов, которые что-то генериют, подгружают и всячески меняют/дополняют страницу

Получается через Гет запрос не реально спарсить данные

 

[Valandersi]

реально, но иногда надо выполнить js, иногда поменять кодировку, если в гет запросе странный ответ

 

[doc]

Получается через Гет запрос не реально спарсить данные

всё зависит от того, как всё устроено на странице и насколько глубоки познания и величина желания. Может данные уже есть в гет, просто в другом формате, а скрипт их просто преобразует. А может данные подтягивает скрипт и можно повторить его запрос. А может вообще ты упираешься в защиту кф как было озвучено выше, и только после её обхода будет получена реальная страница, а не кф заглушка

 

[seregakot]

Получается через Гет запрос не реально спарсить данные

Поставить нужно "загрузить заголовки и содержимое " и брать в переменную

 

[SlavenTyz]

А как проверить

реально, но иногда надо выполнить js, иногда поменять кодировку, если в гет запросе странный ответ

В Гет запросе вроде все нормально написано т.е обычная разметка страницы. А как можно выполнить js

 

[SlavenTyz]

Может данные уже есть в гет, просто в другом формате, а скрипт их просто преобразует. А может данные подтягивает скрипт и можно повторить его запрос. А может вообще ты упираешься в защиту кф как было озвучено выше, и только после её обхода будет получена реальная страница, а не кф заглушка

А как что нибудь из этого можно определить

 

[SlavenTyz]

Может какие нибудь уроки подскажите, где аналогичные моменты рассматриваются

 

[SlavenTyz]

Если данные подгружаются скриптом, тогда как это можно сделать в Гет запросе

 

[Valandersi]

Если данные подгружаются скриптом, тогда как это можно сделать в Гет запросе

Вот пример

https://zennolab.com/discussion/threads/obxod-cloudflare-cherez-get-post-reshenie.69825/