Парсер подсказок Amazon

  • Автор темы Автор темы Hitachi
  • Дата начала Дата начала
Название тестового шаблона
Amazon парсер подсказок test

Hitachi

Creators Template
Регистрация
25.09.2019
Сообщения
384
Реакции
348
Баллы
63
Описание

Шаблон переходит на сайт amazom.com, вводит поисковой запрос.
Если страница не грузится - меняет прокси, начинает обработку запроса сначала.

Если всё в порядке - парсит все появившиеся подсказки во временный список.
Если список пуст - проверяет ещё 12 раз с паузой в 5 секунд.
Проверяет, не совпадают ли подсказки с добавленными ранее (для первого запроса с пустой строкой).
Если не совпадают - переносит их в основной список.
Далее получает букву из английского алфавита, вводит новый запрос в виде "запрос _пробел_буква", снова парсит все подсказки таким же образом.

Когда обработаны все буквы для текущего запроса, удаляется первая строка (пустая), список переносится в таблицу, таблица сохраняется в файл.
Шаблон переходит к следующему запросу, если он есть.

Как пользоваться?

Во входных настройках ввести поисковые запросы (один или несколько).
Для работы через прокси, добавить их в файл proxy.txt.
Результаты сохраняются в папку Results в .csv таблицу с уникальным именем "запрос_дата_время".
 
Категория
  1. Парсинг
Тип шаблона
Открытый
Многопоточность
Нет

Вложения

  • Спасибо
Реакции: Santorini и Manfred

Кто просматривает тему: (Всего: 0, Пользователи: 0, Гости: 0)