Парсер фотографий с mamba.ru

[wizard]

Всем привет!
Шаблон парсинга фото с сайта mamba.ru

Выполнен на GET\POST запросах (без браузера),
используется api mamba.ru, (+ к скорости)
рандомный выбор области\города из списка mamba.ru
сохраняет фото в папку вида: возраст_логин,
имеет black list - куда заносятся ранее обработанные логины,
можно указать минимальное кол-во фото у одного юзера . то есть шаб не будут скачивать фото юзера если их мало.

P.S. Сначала шаб проходится по всем страницам результата поиска - потом только скачивает фото.
Шаб работает быстро, можно в несколько потоков (потоки не будут мешать друг другу)

UP. Внес изменения - теперь в входящих настройках можно задать параметры поиска

 

[PROforum]

Можно ли искать только фото с женских аккаунтов?

 

[molotok]

Запустил шаблон в один поток, прошло пять минут - ни одной фотки еще не спаршено...
Может я что не так делаю?

 

[wizard]

Запустил шаблон в один поток, прошло пять минут - ни одной фотки еще не спаршено...
Может я что не так делаю?

сейчас попровлю )))

Можно ли искать только фото с женских аккаунтов?

Да, в URL в GET кубике - https://www.mamba.ru/ru/search.phtml?ia=M&lf=F&af=20&at=30

ia=M - кто мы (M - мужчина )
lf=F - кого ищем (F - женщина N - друзей)
af=20 - возраст минимально
at=30 - возраст максимально

UP. обновил - теперь все это можно делать из входящих настроек

 

[Nukekuper]

сейчас попровлю ))) сори

Теперь Первичная компиляция проекта перед первым запуском, 20 минут висит

 

[wizard]

Подожди - все будет, правлю ... там немного api поменялось ...

 

[wizard]

Все поправил + сделал более удобные настройки

 

[WalkODoff]

Обажаю всё связанное с родной мамбой))) в своё время в 2009 году оооочень много денег заработал на ней руками.... Очень - это на тот момент примерно было более 100к у.е. за три месяца. Как же жалею что тогда не было такой мощной зенки в руках)))

Пы.Сы отвлекся от темы.... Шаб супер!!! пока все предпочтения этому автору!!!

 

[Astraport]

100к у.е. за три месяца

Ничего себе! Даже не интересны методы, но кто платил такие деньги в 2009 году?

 

[zortexx]

Ничего себе! Даже не интересны методы, но кто платил такие деньги в 2009 году?

Фарма, нутра, гемблинг, адалт.

 

[WalkODoff]

Ничего себе! Даже не интересны методы, но кто платил такие деньги в 2009 году?

Dating , adalt. В то время были псевдоподписки актуальны. А трафика там было просто море

 

[loogle]

Классный шаблон, уже пригодился)

 

[afk]

 

[wizard]

Посмотреть вложение 32198

видимо что-то меняли в настройках ? опишите подробнее.

при настройках по умолчанию- все ок

 

[afk]

видимо что-то меняли в настройках ? опишите подробнее.

при настройках по умолчанию- все ок
Посмотреть вложение 32202

ничего не менял. перекачивал шаб 2 раза

вот ещё раз скачал:

 

[wizard]

ничего не менял. перекачивал шаб 2 раза

вот ещё раз скачал:

странно, у тебя какая версия зенки? у других же, и у меня, - работает....
если хочешь могу посмотреть через teamviewer - свой скайп отправил в ЛС

UP - я тут подумал - у тебя наверно зенка ниже 5.18.0.0 - там появилась такая фича как CookieContainer - без него нужно дополнительно из GET\POST запросов вытягивать куки и прописывать их в следующий GET\POST .

Вижу два варианта для тебя )) обновиться или дописать это самому - благо шаб открытый

 

[ejenitrast]

странно, у тебя какая версия зенки? у других же, и у меня, - работает....
если хочешь могу посмотреть через teamviewer - свой скайп отправил в ЛС

UP - я тут подумал - у тебя наверно зенка ниже 5.18.0.0 - там появилась такая фича как CookieContainer - без него нужно дополнительно из GET\POST запросов вытягивать куки и прописывать их в следующий GET\POST .

Вижу два варианта для тебя )) обновиться или дописать это самому - благо шаб открытый

У меня шаблон работает на зенке 5.12. добавил в шаблон возможность работать через прокси. В самом шаблоне в запросах вместо "без прокси " установил "прокси из проекта". Фотки качаются на успешно.

 

[Strategik]

можно указать минимальное кол-во фото у одного юзера

Скачивает, но установил ограничение "минимальное количество фото в анкете не меньше 30", а скачивает от 5 и больше, хотя блэк лист заполняется.

 

[wizard]

Скачивает, но установил ограничение "минимальное количество фото в анкете не меньше 30", а скачивает от 5 и больше, хотя блэк лист заполняется.

UP. Поправил переменную

 

[maloibtc]

А как же куки?))
Без кук будет крутиться долго а толку 0.
Для теста запустил, напарсило 20к в список login , удалил дубли осталось 7)

 

[wizard]

А как же куки?))
Без кук будет крутиться долго а толку 0.
Для теста запустил, напарсило 20к в список login , удалил дубли осталось 7)

раньше приходилось парсить куки, обрабатывать, вставлять в следующий кубик.
теперь все просто:

 

[maloibtc]

раньше приходилось парсить куки, обрабатывать, вставлять в следующий кубик.
теперь все просто:
Посмотреть вложение 32418

Аааа, я просто юзаю старую зенку))

 

[nick3711]

ЗБС, теперь у меня дохрельярд фоток с бабами, чё с ними делать не пойму

 

[gregus]

Сливай датинг

 

[nick3711]

Сливай датинг

Dating.ru — частные объявления о знакомствах ??? Всё равно не понятно что делать с этим добром, я пока не в теме, изучаю Зинку, на что она способна

 

[Aristarh]

UP. Поправил переменную

Нужный в хозяйстве шаблон. Спасибо.
Проголосовал за него.

Мужчин только не парсит. Не подскажете, что поправить чтоб парсил?


20:09:36 "всего в поиске:2780
взяли: 0 "
20:09:38 отпарсили всех в этом регионе
20:09:38 ZennoPoster Проект C:\Users\Users\Documents\ZennoLab\Парсер фотографий с mamba.ru\v2\парс фото mamba (1).xmlz выполнен успешно!

 

[wizard]

Нужный в хозяйстве шаблон. Спасибо.
Проголосовал за него.

Мужчин только не парсит. Не подскажете, что поправить чтоб парсил?


20:09:36 "всего в поиске:2780
взяли: 0 "
20:09:38 отпарсили всех в этом регионе
20:09:38 ZennoPoster Проект C:\Users\Users\Documents\ZennoLab\Парсер фотографий с mamba.ru\v2\парс фото mamba (1).xmlz выполнен успешно!

поправил

 

[87v]

Спасибо за шаблон. А возможно скачивать не все фото с анкеты, а например только 1 фото?

 

[wizard]

Спасибо за шаблон. А возможно скачивать не все фото с анкеты, а например только 1 фото?

ну конечно можно ))
ставь минимум фото 1 и в последнем кубике веди стрелку к "все скачали"

 

[z@jivalo]

что-то у меня на разных версиях ошибки сыплются
подскажите куда копать надо ?