Многопоточный парсинг. ЦП 100% , ОЗУ там же, дерево процессов Chhromium instance.

[TwistDanceR]

Просто - в чем дело? Одна задача у меня работает в 4 потока, ещё 1 поток оставил под выполнение шаба, который сегодня из диспетчера выполнился 619 раз.
Это из-за диспетчера или что происходит? Шаблон работает c браузером без отображения содержимого, с использованием HtmlAgilityPack. Да даже если б без браузера - с чего такое поведение?
Раньше (вчера) такого не происходило.

 

[Juniorcpa]

Добавьте пауз в экшены обработки JSON (до обработки паузу в 3 сек)

 

[TwistDanceR]

Добавьте пауз в экшены обработки JSON (до обработки паузу в 3 сек)

Не понимаю Ваш совет. У меня нету обработки JSON в проекте.

 

[Juniorcpa]

Не понимаю Ваш совет. У меня нету обработки JSON в проекте.

А работа в браузере ведётся или на запросах? Обработок регулярок много в проекте?

 

[TwistDanceR]

А работа в браузере ведётся или на запросах? Обработок регулярок много в проекте?

Вчера - на запросах , пишу же: HtmlAgilityPack, он без браузера посылает запросы.

Сегодня паршу вот только что - с браузером уже, но вообще не обрабатываю регулярками, тупо tab.DomText забираю в файл. Сейчас после выполнения 100 заданий - зависло около 15 инстансов таких же... Прошло 5 минут и они пропали. А те вчерашние не пропадали несколько часов (пока спал , часов 6 - точно)

 

[TwistDanceR]

А работа в браузере ведётся или на запросах? Обработок регулярок много в проекте?

Cейчас их не много, а вот к концу подвиснет нормально. И как этого избежать?