Парсер номеров из объявлений Яндекс.Недвижимости (realty.yandex.ru)

  • Автор темы Автор темы Hitachi
  • Дата начала Дата начала
Статус
В этой теме нельзя размещать новые ответы.
Название тестового шаблона
realty.yandex.ru парсер номеров test

Hitachi

Creators Template
Регистрация
25.09.2019
Сообщения
384
Реакции
348
Баллы
63
Описание

Шаблон получает ссылку на объявление, переходит по ней. Проверяет загрузку нужной страницы по номеру объявления.
Если номер объявления получить не удаётся - проверяет наличие капчи. Если она есть - решает, проверяет загрузку страницы снова.
Если страница не грузится после нескольких проверок с паузой - меняет прокси.

Когда страница прогружена, шаблон кликает по кнопке "показать номер", записывает все номера в строку.
Далее разделяет их регулярным выражением и записывает в список.

Таким образом обрабатываются все ссылки из файла, указанного во входных настройках.
Когда все ссылки обработаны, в списке удаляются дубли, результаты сохраняются в файл.

Данный проект является приватным и доступен пользователям только со статусом «Client».
Как получить статус?

Скачать проект

 
Категория
  1. Парсинг
Тип шаблона
Открытый
Многопоточность
Нет
Статус
В этой теме нельзя размещать новые ответы.

Кто просматривает тему: (Всего: 0, Пользователи: 0, Гости: 0)