Парсинг поиска vk обход ограничения

[yarchino]

Нужно спарсить документы из поиска https://vk.com/docs но поиск отдает только первые 1000 документов всех есть 3000. Пробовал через веб, там только 20шт. можно получить. На АРI стоит ограничение "Обратите внимание — даже при использовании параметра offset для получения информации доступны только первые 1000 результатов."
Пробовал через execute получаю, также первые 1000 файлов. Какие есть варианты обойти это ограничение? И спарсить все 3000 документов.

 

[arhip1985]

если нет параметра - дата загрузки - то видится, что никак

 

[yarchino]

Никаких дополнительных параметров нет, только ввод ключевого слова и поиск. Не ужели vk с этим все так защищено. Или есть идеи но они...

 

[amyboose]

А что мешает авторизироваться в ВК на запросах и парсить все без API?

 

[yarchino]

А что мешает авторизироваться в ВК на запросах и парсить все без API?

Можно поподробней?

 

[evgen_po]

А что мешает авторизироваться в ВК на запросах и парсить все без API?

Так оно все равно даже таким способом не выдает больше тысячи, как на запросах так и в браузере!
Те, ограничения, которые есть у АПИ - они же стоят и на гет-пост запросах.

 

[amyboose]

Так оно все равно даже таким способом не выдает больше тысячи, как на запросах так и в браузере!
Те, ограничения, которые есть у АПИ - они же стоят и на гет-пост запросах.

А в браузере тоже нельзя выходит? Просто если в браузере контент догружается через аякс сверх лимита, то можно было бы попробовать и на запросах реализовать.

 

[evgen_po]

А в браузере тоже нельзя выходит? Просто если в браузере контент догружается через аякс сверх лимита, то можно было бы попробовать и на запросах реализовать.

Так я и говорю, не дописал просто тогда. В браузере тоже нельзя - если даже догрузить до конца - то там где лимиты АПИ стоят, то и в браузере больше 1000 не дает!

 

[yarchino]

Пробовал искать какие-то зависимости в названиях файлов, ничего нет.

 

[arhip1985]

Пробовал искать какие-то зависимости в названиях файлов, ничего нет.

по дате добавления вроде выдаются - начиная со свежего... в браузере так

 

[yarchino]

по дате добавления вроде выдаются - начиная со свежего... в браузере так

Да,сортировка по дате добавления, но как это использовать для парсинга?

 

[JanCarlo]

Никто не обошел лимит? что в браузере что при апи выдает только 1000