Падает нагрузка

[monstorro]

Всем доброго времени суток.
Машина у меня сильная, 10 ядерная с 64 оперативки. И всё было хорошо, но уже около месяца не могу победить проблему.
Запускаю 30 шаблонов или шаблон в 30 потоков, пробовал по разному за всё это время, результат не меняется.
Сразу всё идёт отлично какое то время (шаблоны браузерные и шли они раньше в 50 потоков легко), потом через некоторое время,
совершенно произвольное время, падает нагрузка на процессор. Было 70-100% загрузки, - стало 3-8%. Потоки Капмонстра - падают с 300 до 10
а то и до нуля. Через некоторое время минута, две, пять или 10 он как будто просыпается и опять работает в полную силу. Я блин в шоке, не могу понять в чем моя ошибка, и это при том, что этими шаблонами работаю почти два года и проблем не было.
Выскажите свои мысли. Очень Вас прошу, я тупо уже ничего не могу понять. Форум перечитал не один раз может не повезло найти ответ(((

 

[Alex91]

Включай трассировку.
Используй статистический анализатор.
В твоем случае можно 5 и 30 потоков для сравнения.
Находи кирпичи на которых происходят потери времени выполнения.

 

[monstorro]

Включай трассировку.
Используй статистический анализатор.

Спасибо за ответ, но в моём случае такие понятия как трассировка и статический анализатор, для меня неизвестные термины. Короче не сталкивался ни разу за столько лет работы с зенкой вот и тупой в этих вопросах((((

 

[monstorro]

может как то оперативку забивает или я что не правильно настроил, в настройках инстанса память по максимуму включена и максимальная и во время работы шаблона

 

[Alex91]

может как то оперативку забивает или я что не правильно настроил, в настройках инстанса память по максимуму включена и максимальная и во время работы шаблона

Погадать ? Ну тут на форуме очень много любителей таких сценариев....
Но я за технический анализ, все таки факты как то более надежные

 

[monstorro]

может как то оперативку забивает или я что не правильно настроил, в настройках инстанса память по максимуму включена и максимальная и ыо время работы шаблона

Погадать ? Ну тут на форуме очень много любителей таких сценариев....

Я Вас понимаю, и Вы бесспорно правы, но я ведь далеко не первый с такой проблемой, и вполне на форуме может оказаться человек знающий ответ на мой вопрос.

 

[Alex91]

может как то оперативку забивает или я что не правильно настроил, в настройках инстанса память по максимуму включена и максимальная и ыо время работы шаблона

Я Вас понимаю, и Вы бесспорно правы, но я ведь далеко не первый с такой проблемой, и вполне на форуме может оказаться человек знающий ответ на мой вопрос.

У меня вот память всегда выделена по максимуму, но проекты не зависают.
Не потому что кто то знает причину, а потому что веду логи на действия, собираю трассировку при отладке, делаю статический анализ трассировки.
Во время отладки последнего проекта , я у себя нашел 4 проблемных места , где происходило замедление. И это с учетом того, что были и другие проекты до этого. И каждый раз что то новенькое вылазит.

Никто не скажет, что не так в чужом проекте. Отладку ты должен делать самостоятельно.

 

[monstorro]

должен делать самостоятельно

Я бы конечно это сделал. Целый месяц проблем мне хватило. Только не знаю как это сделать(

 

[monstorro]

Решил проблему следующим образом. Может кому поможет.
У меня работало три варианта шаблонов. Одинаковые по задачам, но на разных сайтах. Комп отрабатывал 60 потоков легко. И вот тут начались вышеописанные проблемы.
Сразу методом исключения определил шаблоны какого сайта создают проблему. Потом начал искать что не так и очень долго не мог понять в чем дело. Шабы работали штатно и проблема не обнаруживалась.
Начал внимательно просматривать проблемный шаб в проджекте
и опять всё штатно. Потом меня осенило, я вспомнил как где то на форуме прочитал классную мысль:" Поиск по картинке - классная фича, только ресурсов жрет не меряно". А на этом сайте как раз эта фича и использовалась. Раньше всё работало нормально без нареканий, я и не беспокоился так как комп отрабатывал без проблем. Но когда я Очень внимательно и Очень Долго, около 4 часов, смотрел за работой шаба в проджекте, то заметил, что из за изменений на сайте, причем не постоянных, действий поиску по картиноке стало больше. Гораздо больше. Шаб написан не плохо и логика отрабатывала без каких либо ошибок, а вот нажатий по картинке стало столько, что в определённый момент начала падать нагрузка на процессор. Шаб прокручивается 5 раз ьез перегрузки инстанса. Вот и накапливалось.
В итоге нашел замену поику по картинке - и всё заработало.
Одним словом иногда стоит Очень внимательно и продолжительно изучать работу шаба, потому, что при прогонах пару раз всё отлично, а приболее длительном наблюдении понимаешь что бывает сайт работает и по другому. И самое что сбивало с толку так это то, что ошибок нет. Шаб по логике отрабатывает и типа всё ок. Но когда запускаешь его в 60 потоков, то количество поисков по картинке так увеличивается, что ложит проц.
Простите за длинное сообщение, просто хотел более подробно описать мои изыскания. Может кому и пригодится.
Всем Профита и Мира.

 

[Alex91]

Решил проблему следующим образом. Может кому поможет.
У меня работало три варианта шаблонов. Одинаковые по задачам, но на разных сайтах. Комп отрабатывал 60 потоков легко. И вот тут начались вышеописанные проблемы.
Сразу методом исключения определил шаблоны какого сайта создают проблему. Потом начал искать что не так и очень долго не мог понять в чем дело. Шабы работали штатно и проблема не обнаруживалась.
Начал внимательно просматривать проблемный шаб в проджекте
и опять всё штатно. Потом меня осенило, я вспомнил как где то на форуме прочитал классную мысль:" Поиск по картинке - классная фича, только ресурсов жрет не меряно". А на этом сайте как раз эта фича и использовалась. Раньше всё работало нормально без нареканий, я и не беспокоился так как комп отрабатывал без проблем. Но когда я Очень внимательно и Очень Долго, около 4 часов, смотрел за работой шаба в проджекте, то заметил, что из за изменений на сайте, причем не постоянных, действий поиску по картиноке стало больше. Гораздо больше. Шаб написан не плохо и логика отрабатывала без каких либо ошибок, а вот нажатий по картинке стало столько, что в определённый момент начала падать нагрузка на процессор. Шаб прокручивается 5 раз ьез перегрузки инстанса. Вот и накапливалось.
В итоге нашел замену поику по картинке - и всё заработало.
Одним словом иногда стоит Очень внимательно и продолжительно изучать работу шаба, потому, что при прогонах пару раз всё отлично, а приболее длительном наблюдении понимаешь что бывает сайт работает и по другому. И самое что сбивало с толку так это то, что ошибок нет. Шаб по логике отрабатывает и типа всё ок. Но когда запускаешь его в 60 потоков, то количество поисков по картинке так увеличивается, что ложит проц.
Простите за длинное сообщение, просто хотел более подробно описать мои изыскания. Может кому и пригодится.
Всем Профита и Мира.

Включенная трассировка и статический анализ трассировки показал бы эту проблему почти сразу...
Но кому это нужно, если можно несколько дней наблюдать за работой в проджекте

 

[monstorro]

Включенная трассировка и статический анализ трассировки показал бы эту проблему почти сразу...
Но кому это нужно, если можно несколько дней наблюдать за работой в проджекте

Цель сообщения? Хотя не отвечай.