400 Bad Request - как вылечить?

Mitnik

Client
Регистрация
22.12.2014
Сообщения
118
Благодарностей
6
Баллы
18
Подскажите, пожалуйста, как вылечить такую штуку?

В процесе парсинга через некоторое время выскакивает ошибка с текстом:
400 Bad Request
Request Header Or Cookie Too Large nginx/1.5.8

При входе по тому же адресу через другой браузер, все нормально.
Парсил в один поток.
 

Mitnik

Client
Регистрация
22.12.2014
Сообщения
118
Благодарностей
6
Баллы
18
Делаю через Content Downloader в 10 потоков - тоже все отлично идет.
 

VladZen

Administrator
Команда форума
Регистрация
05.11.2014
Сообщения
22 453
Благодарностей
5 911
Баллы
113
Очистку куки делаете в проекте?
 

Mitnik

Client
Регистрация
22.12.2014
Сообщения
118
Благодарностей
6
Баллы
18
Да, конечно.
Но чистка была только в начале проекта.
Добавил удаление куки после каждой карточки товара, пока полет нормальный.
Похоже, из-за этого и было.
Спасибо за помощь.
 

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)