Парсинг ссылок на объявления Youla.ru

[Hitachi]

Описание

Шаблон работает с youla.ru и auto.youla.ru. Парсить лучше раздельно, так как объявления не совпадают по вёрстке.

Шаблон переходит по ссылке на выдачу объявлений, проверяет загрузку страницы, парсит все объявления с неё.
Проверяет, достаточно ли объявлений спаршено.
Пока не спаршено достаточное количество, переходит на следующую страницу, парсит новые (для auto.youla.ru) или прокручивает страницу, очищает список и парсит снова (для остальных категорий).
Если в выдаче закончились объявления, получает следующую ссылку.
Шаблон завершает работу, когда будет спаршено заданное во входных настройках количество объявлений, либо когда будут спршены все объявления по заданным ссылкам.

Как пользоваться?

Во входных настройках ввести ссылки на выдачу объявлений (каждую с новой строки) и указать количество объявлений для парсинга.
Для работы через прокси, добавить их в файл proxy.txt.

Результаты будут сохранены в папку Results в файл Results_дата_время.txt

 

[Добрый]

Копирует максимально только 61 ссылку, как я понял беда с переходом на след страницу.

 

[Добрый]

Скорее всего проблема с загрузкой страницы и нажатием "End"

 

[Hitachi]

Копирует максимально только 61 ссылку, как я понял беда с переходом на след страницу.

Спасибо, проверю

 

[Добрый]

Скорее всего проблема с загрузкой страницы и нажатием "End"

Посмотреть вложение 55247

Опытным путем исправил, добавляем клик на "показать ещё", дальше работает норм

 

[Добрый]

Периодически лезет на критичная ошибка (см. вложения).
Вставил две ссылки в формате Первая и Вторая
Мб, проблема была с загрузкой страницы и он упал в ошибку.
Это так сказать к слову, спасибо за шаблон

 

[Добрый]

Спасибо, проверю

Уточни пжлст формат ссылок, периодически появляется такая ошибка

 

[Hitachi]

Уточни пжлст формат ссылок, периодически появляется такая ошибка

Посмотреть вложение 55253

Напишите, пожалуйста, id ошибки этой, когда повторится

 

[Hitachi]

Периодически лезет на критичная ошибка (см. вложения).

Шаблон перезалит, обновил кубик парсинга объявлений.
Вроде как эта ошибка больше не должна возникать

 

[Добрый]

Шаблон перезалит, обновил кубик парсинга объявлений.
Вроде как эта ошибка больше не должна возникать

Спасибо, ошибка ушла все ок.

 

[fry87]

А не планируется ли автоматическая публикация объяв?

 

[smartwisard]

Добавляю ссылку и собиратель собирает все объявления https://youla.ru/?q=аренда, экскаватор Hitachi ?

 

[Nelis]

Парсер ваш показывает номера всех категорий?

 

[smartwisard]

Приложенный шаблон сохранит вам таблицу с разделами авито и соответствующими ей разделами юлы.
Подробный список разделов юлы как раз решает трудность, когда не знаете, какую ссылку парсить.

Соотнесённые в нём разделы авито и разделы юлы соотнесены давно .

 

[smartwisard]

Шаблон содержит список со ссылками на все разделы юлы, кроме заявок на услуги.