Заболел Проксичеккер

[Александр Николаевич]

Первый месяц встроенный Проксичеккер в Зеннопостере работал прекрасно, я не мог нарадоваться на него.

А сейчас он чего-то захирел.

Источников он надыбал аж 976 штук, работает сутками, не выключаясь.

Но живых прокси с каждым днем становится все меньше и меньше.

В базе данных у него сейчас 1 миллион 609 тысяч прокси.

Проверка их идет непрерывно уже несколько суток подряд со скоростью 395 штук в минуту.

Но в живых только 19 штук. Я в шоке!

Что делать?

 

[rostonix]

База засралась, вот и результат)
мой совет: вместо автопоиска добавить 10-20 источников прокси, на которых ежеденевно обновляются данные на главной странице

 

[Александр Николаевич]

Спасибо, понял.

А нельзя сделать так, чтобы она не засералась? Чтобы Зеннопостер сам следил за этой базой и не допускал ее засерания?

 

[Александр Николаевич]

мой совет: вместо автопоиска добавить 10-20 источников прокси, на которых ежеденевно обновляются данные на главной странице

Пожалуйста, если не жалко, пришлите мне в личку 20 самых хороших источников, о которых Вы говорите.

Я так и сделаю, как Вы сказали.

 

[rostonix]

неа, там же множатся источники постоянно и все в работе. итого у вас там 99,9% мертвых старых прокси( которые перечекиваются(
я не использую прокси в своей работе, не подскажу. нужно погуглить proxy list и выбрать сайты с ежедененым обновлением на главной

 

[Александр Николаевич]

А Проксичеккер сам не в состоянии за этим следить? По большому счету, как и Прокси Свитчер, он должен уметь фильтровать застарелые прокси и вычищать их из своей базы. Речь идет о накопительном черном списке прокси. Если прокси попал в этот черный список, значит не надо его даже допускать до проверки! Надо фильтровать их на входе, при загрузке из источников.

 

[rostonix]

В текущей реализации нет)
Я скину этот топик разработчику чекера. Может быть в будущем придумают решение)