- Регистрация
- 23.12.2014
- Сообщения
- 7 379
- Благодарностей
- 2 041
- Баллы
- 113
Всех приветствую!
Предлагаю вашему вниманию
GroupsParseMailRu.v1.0.0
Предлагаю вашему вниманию
GroupsParseMailRu.v1.0.0
- GET&POST
- Работает не используя прокси так как не вижу необходимости, при необходимости можно подключить
- Работает в один поток
- Без привязки списков и таблиц
- Сделал уменьшение обращения к файлам что увеличило скорость и уменьшило обращение к диску, сохранение данных происходит раз в 3-4 секунды
- Скорость
Настройки очень просты
- Добавил настройку отработанные группы - это означает что при первом запуске после успешного парсинга с любой группы в список будет сохраняться сама группа
- При повторном запуске чтобы не парсить повторно будет проверка, если желаете повторно с неё парсить просто удалите её из списка
- Все изменения в списках делать до запуска шаблона
При запуске программы у нас происходит парсинг групп
- Создаётся один общий каталог ResultOnOffLine
При любом запуске шаблона в каталоге ResultOnOffLine создаётся каталог под именем вашего местного времени, в котором и происходит сохранение всех данных, для каждой группы свой каталог в котором по три файла
- В CSV файле все email и информация о пользователе, о тхт файлах думаю и так всё всем понятно
- В ТХТ файлах сохраняется только email без дублей
Вот так выглядит CSV файл
Это скрин моего теста с 5-ти групп
Подводим итог 5-ти групп:
- Спарсили 2137 групп, кол-во групп выдаёт по разному
- Парсинг участников начался в 21.45.40 завершился 00.29.17
- общее время 2 часа 20 минут = 140 минут
- общее кол - во участников 20520+174461+151912+152467+190390 = 689750
- 689750 / 140 = 4927 в минуту
Я уже не буду выкладывать скрины этих групп чтобы доказать сколько в группе участников и сколько выпарсило, приложу ссылки на эти группы
https://my.mail.ru/community/mir_prirodi/
https://my.mail.ru/community/m.na.m/
https://my.mail.ru/community/poet_omar/
https://my.mail.ru/community/women.trifles/
https://my.mail.ru/community/sportismylife/
Количество групп выдаётся по разному
В настройках есть глубина для поиска групп и поиска участников
Сейчас выставлены значения по умолчанию протестив не один раз, большие значения хорошего результата не дают
Если продажи будут и заинтересованность в шаблоне я буду продолжать его дополнять
Скажу сразу что дополнения некоторые будут платные
- В плане добавить по запросу, по названию группы
- Парсинг email друзей спарсенного участника
- Так же парсинг участников по любой букве алфавита
При использовании с нового аккаунта не забываем нажать на главной странице mail.ru кнопку присоединиться
Шаблон закрытый
Версия ZennoPoster 5.13.0.0, на ниже версиях не тестировал
Цена шаблона:
Версия GroupsParseMailRu.v1.0.6 = 2000 руб.
- Добавлен поиск друзей
- Добавлен поиск участников из групп пользователей
Всем удачи!
Последнее редактирование: