подскажите как спарсить ID Uerov в ok.ru

[stifler]

привет всем,подскажите как спарсить ID Uerov в ok.ru

 

[rostonix]

Прикладывайте кусок кода, из которого нужно парсить данные

 

[stifler]

у меня по критерии парсинга показывает 30000 людей а на странице не все, тоести если я скролю появляется но эта очень долга, ести другой способ?

 

[rostonix]

Вряд ли. Они же догружаются после фокуса элемента внизу страницы. Сразу все в исходном коде страницы они не представлены

 

[stifler]

эта я понял,поэтому и спросил как лучше мне эта сделать,ести какой-то другой метод?

 

[Санёк]

Такую информацию вряд ли кто то расскажет, даже если он и есть. (метод). Каждый находит свой метод для решения проблемы. Либо ищет в интернете либо покупает у тех кто уже это сделал.

 

[budora]

у меня по критерии парсинга показывает 30000 людей а на странице не все, тоести если я скролю появляется но эта очень долга, ести другой способ?

Что за критерии ..? Откуда надо парсить регионы, группы, лайкнувшие ?

 

[stifler]

из поиска,по региону и все

 

[black_pariah]

эта я понял,поэтому и спросил как лучше мне эта сделать,ести какой-то другой метод?

дайте ссылку на страницу, и всё равно больше 1000 не наскролите,только с фильтрами всех спарсите!

 

[budora]

Всех никак... только парсить перебором и проверять на дубли. Даже в API ограничение стоит 100 ID

 

[stifler]

дайте ссылку на страницу, и всё равно больше 1000 не наскролите,только с фильтрами всех спарсите!

а па поводу фильтров, как эта зделать?можете абиснить по подробне?

 

[rostonix]

например, парсить сначала возраст 18-25 лет, потом 25-35 и тд

 

[stifler]

спасибо,хорошая идея

 

[stifler]

короче я сделал шаблон,работает все нормально,но на эмуляции клавиатуры (Page Down) уходит около 4 минуты, эта нормалина, можно ли эта сделать быстрее?

 

[Виктор П]

дайте ссылку на страницу, и всё равно больше 1000 не наскролите,только с фильтрами всех спарсите!

у меня получается гораздо больше наскроллить

 

[Виктор П]

короче я сделал шаблон,работает все нормально,но на эмуляции клавиатуры (Page Down) уходит около 4 минуты, эта нормалина, можно ли эта сделать быстрее?

а как вы завершаете цикл скроллинга, фокуса и нажатий на надпись(показать еще), я имею ввиду когда проскроллили до конца?

 

[rostonix]

вот тут пример логики для скролла с учетом высоты страницы http://www.youtube.com/watch?x-yt-cl=84503534&v=nDmuZ77H31o&x-yt-ts=1421914688

 

[Armagidec]

у меня получается гораздо больше наскроллить

Это кам образом, через поиск больше 1000 не спарсить...

 

[Sergodjan]

Это кам образом, через поиск больше 1000 не спарсить...

на мобильной версии 1000, на обычной версии сайта 1700-1800..