Парсер отзывов Otzovik

  • Автор темы Автор темы Hitachi
  • Дата начала Дата начала
Название тестового шаблона
Парсер отзывов Otzovik test

Hitachi

Creators Template
Регистрация
25.09.2019
Сообщения
384
Реакции
348
Баллы
63
Описание

Шаблон берёт ссылку из входных настроек, переходит по ней. Проверяет загрузку страницы, парсит все отзывы в список.
Далее берёт по одному, парсит из него данные в таблицу, открывает страницу отзыва и парсит полный текст.
После этого переходит на следующую страницу и парсит отзывы с неё таким же образом.
Парсинг завершается либо когда достигнул лимит из входных настроек, либо когда все ссылки обработаны.

Как пользоваться?

Во входных настройках указать ссылки для парсинг, сервис для решения капчи, количество отзывов для парсинга (по умолчанию 0 - парсятся все отзывы).
Добавить прокси в файл proxy.txt.
Результаты сохраняются в .xlsx файл в папку Results в формате "Автор;Дата;Оценка;Плюсы;Минусы;Текст отзыва;Лайки;Ссылка на товар".
 
Категория
  1. Парсинг
Тип шаблона
Открытый
Многопоточность
Нет
Дата обновления
24.04.2020
Описание обновления
Обновлено решение капчи

Вложения

  • Спасибо
Реакции: phoenixs и wideybro
Описание

Шаблон берёт ссылку из входных настроек, переходит по ней. Проверяет загрузку страницы, парсит все отзывы в список.
Далее берёт по одному, парсит из него данные в таблицу, открывает страницу отзыва и парсит полный текст.
После этого переходит на следующую страницу и парсит отзывы с неё таким же образом.
Парсинг завершается либо когда достигнул лимит из входных настроек, либо когда все ссылки обработаны.

Как пользоваться?

Во входных настройках указать ссылки для парсинг, сервис для решения капчи, количество отзывов для парсинга (по умолчанию 0 - парсятся все отзывы).
Добавить прокси в файл proxy.txt.
Результаты сохраняются в .xlsx файл в папку Results в формате "Автор;Дата;Оценка;Плюсы;Минусы;Текст отзыва;Лайки;Ссылка на товар".

Здравствуйте, Отзовик закрутил гайки, с помощью решений на питоне активно банятся прокси, эффективность парсинга сводится к нулю, скажите у вас ведь в решении тоже используются прокси насколько я понял? Или расшифровка капчи?

К сожалению сужу тольк по описанию скрипта, у самого мак не могу проверить.
 
Здравствуйте, Отзовик закрутил гайки, с помощью решений на питоне активно банятся прокси, эффективность парсинга сводится к нулю, скажите у вас ведь в решении тоже используются прокси насколько я понял? Или расшифровка капчи?

К сожалению сужу тольк по описанию скрипта, у самого мак не могу проверить.

Добрый день.
Да, в шаблоне используются прокси и решение капчи
 
Добрый день.
Да, в шаблоне используются прокси и решение капчи

Давно тестировали свое решение? И скажите пожалуйста, могу с вами проконсультироваться в тг?
 
Последнее редактирование:
Давно тестировали свое решение? И скажите пожалуйста, могу с вами проконсультироваться в тг?
Тестируется регулярно, прокси не банились ни разу, насколько я помню.
Некоторые просто изначально не подходили, сайт не открывался
 
День добрый! Скажите пожалуйста, парсер работает? Не удалось запустить на ZP Pro 7.3.1.1
Тип Время Сообщение
10:57:29 Парсинг страницы Не найдены элементы по заданным параметрам
10:57:29 ZennoPoster Не удалось выполнить проект C:\Users\Администратор\Downloads\Парсер отзывов Otzovik\Парсер отзывов Otzovik.xmlz
 

Похожие темы

Кто просматривает тему: (Всего: 0, Пользователи: 0, Гости: 0)