База прокси

[rostonix]

Предлагаю чтобы была возможность/опция отключать коллекционирование прокси в базу данных Зенно. У меня около 5 постоянно обновляющихся источника и спустя 24 часа в Зенно уже база в 25000 прокси. А я так понимаю что он гоняет по кругу и свою базу тоже? Иначе зачем ему их копить и не удалять? А там уже куча мертвых

В идеале я бы хотел чтобы в базе зенно присутствовали только спарсенные последним проходом прокси. Если их уже нет в источниках - не должно быть и в базе.

 

[ZAI.ONE]

1300 источников и за 500к проксей. Это нормально? Наверное надо было начинать с вики для чекера...

 

[alekwuy]

Скорее нужно сделать галочку "удалять прокси из базы если его нет в источнике"

 

[rostonix]