Сбор информации об объявлениях из craigslist.org

  • Автор темы Автор темы Santorini
  • Дата начала Дата начала
Название тестового шаблона
parsing craiglist.org (test)

Santorini

Creators Template
Регистрация
29.08.2019
Сообщения
775
Реакции
993
Баллы
93
Описание

Сбор информации об объявлениях из craigslist.org
- шаблон для Zennoposter, для автоматического сбора информации об объявлениях из доски craigslist.org, ссылки на рубрики которых, указаны во входящем файле. Все собранные данные сохраняются в Excel файл. Фото сохраняются в отдельные папки, с названием ID объявления. Также можно наблюдать лог о процессе сбора.

Как пользоваться?

Перед запуском шаблона необходимо заполнить входящие настройки:
  • Укажите путь к файлу с ссылками на категории (например: https://sfbay.craigslist.org/d/antiques/search/ata)
  • Количество объявлений для сбора
  • Скачивать фото
  • Укажите путь к файлу с прокси (формат: username:password@ip:port)
После успешного выполнения шаблона, результат сохранится в Excel файл. Название Excel файла - содержит в себе дату начала сбора данных и название категории
 
Категория
  1. Парсинг
  2. Доски объявлений
Тип шаблона
Открытый
Многопоточность
Да
Дата обновления
16.03.2021
Описание обновления
добавлена проверка прокси перед началом работы
обновлены названия переменных
другие мелкие изменения

Вложения

Последнее редактирование:
  • Спасибо
Реакции: soprano
А данные продавца парсятся - телефон, адрес?
 

Кто просматривает тему: (Всего: 0, Пользователи: 0, Гости: 0)