Количество страниц в выдаче Гугл

bizzon

Client
Регистрация
08.09.2015
Сообщения
1 103
Благодарностей
132
Баллы
63
Нужен периодический мониторинг количества страниц в выдаче Гугл около 200 сайтов.
Как правильно реализовать это с помощью ZennoPoster?
 

Sergodjan

Administrator
Команда форума
Регистрация
05.09.2012
Сообщения
20 407
Благодарностей
9 116
Баллы
113
Нужен периодический мониторинг количества страниц в выдаче Гугл около 200 сайтов.
Как правильно реализовать это с помощью ZennoPoster?
в поиске гугла вводим команду site:mysite.ru и парсим (или берем get'ом) со страницы колв-о страниц..

upload_2016-6-20_23-59-34.png


upload_2016-6-21_0-3-31.png
 
  • Спасибо
Реакции: bizzon

bizzon

Client
Регистрация
08.09.2015
Сообщения
1 103
Благодарностей
132
Баллы
63
Спасибо, а есть ограничения какие, нужно через прокси или Гугл не против?
 

ooops

Client
Регистрация
26.05.2015
Сообщения
93
Благодарностей
27
Баллы
18
Последнее редактирование:
  • Спасибо
Реакции: bizzon

bizzon

Client
Регистрация
08.09.2015
Сообщения
1 103
Благодарностей
132
Баллы
63
против). в serp выдаче результат не точен. до недавнего времени юзали http://ajax.googleapis.com/ajax/services/search/web , но прикрыли, сейчас по ключу в новом апи https://www.googleapis.com/customsearch/v1?key=*******&cx=****&q=site:www.domain.com

есть и другие варианты парсинга, но они уже составляют коммерческую тайну ;-)
Custom Search - не подходит, поскольку, как я понял, нужно добавлять код на сайт и(или) прописывать его в google webmasters tools, а это не хотелось делать.
 

ooops

Client
Регистрация
26.05.2015
Сообщения
93
Благодарностей
27
Баллы
18
можно указать поиск по всему интернету
 

bizzon

Client
Регистрация
08.09.2015
Сообщения
1 103
Благодарностей
132
Баллы
63
можно указать поиск по всему интернету
странные цифры показывает.
Может что неправильно делаю.

В ресурсе "Пользовательский поиск", в поле "Сайты, на которых выполняется поиск:" указываю какой-нибудь свой сайт.
Далее, в разделе:
"Сайты, на которых выполняется поиск:" - ставлю искать во всем интернете.
Получаю - cx=""

Иду по строке https://www.googleapis.com/customsearch/v1?key=*******&cx=****&q=site:www.domain.com со своим ключом и cx.
Показывает "totalResults": "0", или какие-то заниженные цифры.

Или нужно форму на сайт устанавливать и обращаться к ней?
 

Кто просматривает тему: (Всего: 1, Пользователи: 0, Гости: 1)