CloudFlare блокирует POST/GET запросы. Можно ли обойти?

[dr.reklam]

На одном сайте ранее работал шаблон на запросах, недавно запросы начали блокироваться, смена ip и машин не помогла. Изучил вопрос и обнаружил что сайт добавил CloudFlare и теперь она как-то замечает что запрос идет от бота и присылает ответ "доступ запрещен". Сам сайт на Chromium и zennoposter 7.7.13 работает, нужный мне запрос при загрузке всего сайта в мониторе трафика успешно отправляется и получает успешный ответ. Но если отправить этот запрос повторно, то выдает ошибку "доступ запрещен", либо ошибку 429 "превышено количество запросов". Проблема точно не в зенке, т.к. такая же ситуация при повторной отправке через любой браузер при загруженном сайте. Возможно есть некое решение, например пускай хотя бы грузит первую страницу сайта, получает некий кэш и его как-то помещает в запросы которые уже и будут потом отправляться. Подскажите кто знает есть ли вообще решение в принципе. Может есть какие-то идеи куда копать. Сайт если что K@z@nExpre$$.ru. Запрос это обычный парсинг карточек в поисковой выдаче маркетплейса.

Пока для малых оборотов вижу только физическую загрузку страницы и вытягивание ответа по нужном запросу через мониторинг трафика.

 

[Ахилес]

конечно не в зенке дело... дело в клаудфлаере

если погуглить по форуму, то найдется несколько заведенных багов по клауду и недоступному протоколу для запросов в зенке, а так же неизменный ответ от разработчиков зенки, что нужный протокол не поддерживается в 7-ке и не будет добавлен от слова совсем.
предлагают либо ждать 8-ки, либо использовать сторонние программы для запросов... например курл

 

[dr.reklam]

конечно не в зенке дело... дело в клаудфлаере

если погуглить по форуму, то найдется несколько заведенных багов по клауду и недоступному протоколу для запросов в зенке, а так же неизменный ответ от разработчиков зенки, что нужный протокол не поддерживается в 7-ке и не будет добавлен от слова совсем.
предлагают либо ждать 8-ки, либо использовать сторонние программы для запросов... например курл

Пробовал и -Curl и через Postman и просто в обычном браузере находил успешный запрос и пробовал отправить его повторно. Во всех случаях неудачно, либо нет ответа вовсе, либо ошибка 429 "превышение количества запросов", либо "доступ запрещен", по всем признакам это CloudFlaer как то обнаруживает и блокирует.

 

[dr.reklam]

Вообщем как мне подсказали в тг канале zennolab обойти ClaudFlare можно попробовать путем сканирования трафика мобильного приложения, если таковое имеется у сайта. Далее находим GET запрос который возвращает нужные нам данные и пробуем его выполнить уже в zennoposter.
Еще способ это использование -curl с помощью bash.

 

[Shogo]

Вообщем как мне подсказали в тг канале zennolab обойти ClaudFlare можно попробовать

получилось что нибудь?

 

[bad robot]

пробуйте включить альтернативные http-запросы - часто помогает

 

[Shogo]

пробуйте включить альтернативные http-запросы - часто помогает

шутите? )

 

[bad robot]

шутите? )

нет

 

[Shogo]

нет

тогда можно хоть один пример сайта, с защитой от клаудфара, где этот способ помогает не получить 403 ошибку? )

 

[dr.reklam]

получилось что нибудь?

да, отснифал трафик из приложения установлеенного на телефоне и нашел нужный запрос, далее его стал отправлять уже из шаблона и все заработало.

 

[cooki]

тогда можно хоть один пример сайта, с защитой от клаудфара, где этот способ помогает не получить 403 ошибку? )

сайт не дам, но через расширение сайта, cf обошел именно этим способом.
когда на сервер новый ставил софт, долго не мог понять, почему перестало работать, пока не изменил.