Парсер подсказок поисковика Яндекс

[Hitachi]

Описание

Шаблон переходит на сайт yandex.ru, открывает выбор региона, вводит значение из входных настроек, выбирает предложенный вариант.

Далее шаблон вводит поисковой запрос, парсит все появившиеся подсказки во временный список.
Проверяет, не совпадают ли подсказки с добавленными ранее (для первого запроса с пустой строкой).
Если не совпадают - переносит их в основной список.
Далее получает букву из алфавита, вводит новый запрос в виде "запрос _пробел_буква", снова парсит все подсказки таким же образом.

Когда обработаны все буквы для текущего запроса, список переносится в таблицу, таблица сохраняется в файл.
Шаблон переходит к следующему запросу, если он есть.

Как пользоваться?

Во входных настройках:

• Ввести поисковые запросы;
• ввести регион поиска;
• выбрать капча-сервис;
• указать количество попыток решить капчу.

Для работы через прокси, добавить их в файл proxy.txt.
Результаты сохраняются в папку Results в .csv таблицу с уникальным именем "запрос_дата_время".

 

[feyanax]

Описание

Шаблон переходит на сайт yandex.ru, открывает выбор региона, вводит значение из входных настроек, выбирает предложенный вариант.
Если страница не грузится - меняет прокси.

Далее шаблон вводит поисковой запрос, парсит все появившиеся подсказки во временный список.
Проверяет, не совпадают ли подсказки с добавленными ранее (для первого запроса с пустой строкой).
Если не совпадают - переносит их в основной список.
Далее получает букву из алфавита, вводит новый запрос в виде "запрос _пробел_буква", снова парсит все подсказки таким же образом.

Когда обработаны все буквы для текущего запроса, список переносится в таблицу, таблица сохраняется в файл.
Шаблон переходит к следующему запросу, если он есть.

Как пользоваться?

Во входных настройках ввести поисковые запросы и регион поиска.
Для работы через прокси, добавить их в файл proxy.txt.
Результаты сохраняются в папку Results в .csv таблицу с уникальным именем "запрос_дата_время".

Сделал тоже самое, можно в многопоток, на запросах(на одном). Выбор региона не делал, посчитал что не нужен.
Прикрепляю, посмотрите не говно ли я сделал?