Низкая скорость работы на POST/GET

[Tom Cruise]

Здравствуйте. Есть шаблон который работает на запросах, при этом в 20-50 потоков он работает нормально, но когда доходит до 150-200 начинает работать в 3-4 раза медленнее. Запросы идут через прокси (свои). Запускал сетевой монитор который в ZP, при отсутствии нагрузки показывает 108 соединений (макс.), при работе в 150 потоков - 6 соединений. Это мало или нормально? ЗП стоит на сервере у webtropia - 4cpu, 8gb ram, 500 mbit соединение. Можно как-то ускорить работу шаблона?

 

[orka13]

1. DLL библиотеки для обработки используются? Они иногда тормозят когда к пиковым значениям нагрузка подходит.
2. Какая нагрузка на CPU (скрин графика диспетчера бы сюда).
3. Браузер в настройках шаблона отключен?
4. Прокси случайно не таким методом подключаете [Экшн "Установить прокси" без браузера] ?

 

[Tom Cruise]

1. DLL библиотеки для обработки используются? Они иногда тормозят когда к пиковым значениям нагрузка подходит.
2. Какая нагрузка на CPU (скрин графика диспетчера бы сюда).
3. Браузер в настройках шаблона отключен?
4. Прокси случайно не таким методом подключаете [Экшн "Установить прокси" без браузера] ?

1. Вроде нет, стандартно
2. +
3. Браузер отключен
4. Прокси через переменную в кубике запросов выставлены

 

[SoUp1]

Как для 150 потоков сильно процессор загружен, пробуйте протестировать
шаблон на версии 5.15.0.0 так как на последних версиях есть баг который сильно грузит процессор при работе с post/get

 

[orka13]

при такой нагрузке на CPU может тормозить шаблон, то есть пока не обработает результат ответа (а это именно эта часть скорее-всего так нагрузку поднимает), то запросы повторные не посылает. Смотрите еще по трассировке в логах на каких кубиках много времени тратится и думайте как их оптимизировать.

 

[Geka1989]

У меня проц начинает грузить когда сам сайт начинает долго обрабатывать запрос, если запрос сразу отправляется то никаких тормозов, а вот ели на большом количестве потоков идет задержка в запросе 15-20 сек то сразу начинаются затупы, я просто в таких случаях снижаю количество потоков, проц разгружается и шаб работает быстрее

 

[Tom Cruise]

Поставил 5.15.0.0 версию - не помогло. Включил трассировку и внезапно выяснилось, что дело не в запросах. После многих запросов у меня стоит проект в проекте, в который вынесено примерно 15-20 кубиков которые просто парсят ответ. Так вот этот проект в проекте выполняется по 30-40 секунд. Так же возникают огромные задержки при работе с файлами, то есть добавлении/взятии строк из списков на жестком диске (диск ssd). В общем, легче не стало. Куда тут копать?