Нужна помощь, возможно платно.

[ffeniks]

Делаю парсер авито и из рук в руки. В 1 поток, суть в том что при парсинге объявлений - память сервака настолько увеличивается, что зеннопостер просто вырубается. Если выключить js - всё норм. У авито "показать номер" кнопка работает на css, в итоге парсится всё на ура, но вот у irr.ru кнопка работает на js и при его отключении - номер спарсить не удаётся.
(т.к. кнопка показать номер не работает)

Вопрос - как спарсить номер объявлений на irr.ru при отключенном js, либо альтернативой без повышения требуемой памяти зеннопостера. Если решение простое просьба подсказать, если решение сложное - готов обсудить цену решения данного вопроса.

Спасибо.

 

[arhip1985]

Делаю парсер авито и из рук в руки. В 1 поток, суть в том что при парсинге объявлений - память сервака настолько увеличивается, что зеннопостер просто вырубается. Если выключить js - всё норм. У авито "показать номер" кнопка работает на css, в итоге парсится всё на ура, но вот у irr.ru кнопка работает на js и при его отключении - номер спарсить не удаётся.
(т.к. кнопка показать номер не работает)

Вопрос - как спарсить номер объявлений на irr.ru при отключенном js, либо альтернативой без повышения требуемой памяти зеннопостера. Если решение простое просьба подсказать, если решение сложное - готов обсудить цену решения данного вопроса.

Спасибо.

наверно надо ставить ограничение в цикле страниц на 30, записывать конечную страницу в файл, а далее начинать шаблон с последнего места

 

[qzen4i]

Делаю парсер авито и из рук в руки. В 1 поток, суть в том что при парсинге объявлений - память сервака настолько увеличивается, что зеннопостер просто вырубается. Если выключить js - всё норм. У авито "показать номер" кнопка работает на css, в итоге парсится всё на ура, но вот у irr.ru кнопка работает на js и при его отключении - номер спарсить не удаётся.
(т.к. кнопка показать номер не работает)

Вопрос - как спарсить номер объявлений на irr.ru при отключенном js, либо альтернативой без повышения требуемой памяти зеннопостера. Если решение простое просьба подсказать, если решение сложное - готов обсудить цену решения данного вопроса.

Спасибо.

Поставить перезагрузку инстанс через 5-10 раз выполнения цикла.

 

[ffeniks]

Поставить перезагрузку инстанс через 5-10 раз выполнения цикла.

Перезагрузка инстанса - в PM же не работает да? только в ZP ?

 

[qzen4i]

Перезагрузка инстанса - в PM же не работает да? только в ZP ?

да.

 

[ffeniks]

да.

Спасибо за ответ, в принципе так и думал, просто не понимал пчм это в PM не срабатывало)

 

[AloneSlamer]

все еще проще можно сделать на руках.

 

[surrealmix]

Все еще проще, быстрее и надежнее можно сделать на Get/Post запросах на обоих сайтах.

 

[ffeniks]

Все еще проще, быстрее и надежнее можно сделать на Get/Post запросах на обоих сайтах.

Не подскажите как ? нужно только на irr.ru и только телефон