Проверка и выгрузка по фильтру

[Max]

Сделайте возможность делать выгрузки проксей из базы по фильтру. Общая суть делаем фильтр(значения фильтра можно из правила взять или вообще правило юзать) - выгружаем или проверяем из базы только те прокси которые соответствуют правилу (не с живого списка).
Просто глупо чекать всю базу если нужны только русские прокси например. Те я думаю, что в базе должны оставаться значения фильтров хоть и старые. просто проводим перечек уже чеканной базы по правилу.

 

[rostonix]

Не понимаю.
Фильтр применяется еще до попадания прокси в базу.
При этом от правил он никак не зависит

 

[Max]

Фильтр применяется к базе уже прочеканных проксей. Просто когда идет чек базы вся доступная информация сохраняется. Например страна, тип и тд. Чтобы в дальнейшем можно было быстро все это дело фильтрануть и чекать (чтобы страну определить запросы не нужны, достаточно IP).
Смысл не в том, когда он применяется. Смысл в том, что не перечекивать миллионы проксей, которые изначально не нужны (например страны и тд). Мы тупо делаем выборку и с ней уже работаем.
Пример база 10 000 - .... Ее перечекать нужно 30000+ тысяч запросов (если чекать еще на типы, без учета доп запросов). А зачем? Можно просто изначально настроить фильтр и все (фильтр не для живого списка, а для базы).
ЭТО ФИЛЬТРЫ НЕ ДЛЯ СБОРА И НЕ ПРАВИЛО ДЛЯ ВЫДАЧИ. Это правильно которое перед проверкой фильтрует базу прокси (хорошо бы туда еще добавить фильтр по дате последнего чека, чтобы можно было фильтрануть недавно чеканные).

Еще замутить умный поиск по типу искать диапазоны... Чето вроде этого. Те при поиске и валидности диапазона, ищется приближенный диапазон и чекается.

 

[rostonix]

Отправлю ссылку на топик автору проксичекера.